TRECVID(視頻檢索國際權威評測)簡介

【轉】作者:Steven Wang| 可以轉載, 轉載時務必以超鏈接形式標明文章原始出處和作者信息及版權聲明

最近看的論文的實驗部分很多都使用了TRECVID提供的數據,於是把TRECVID研究了一番,收穫頗大。

TRECVID是視頻檢索領域的國際權威評測。

TRECVID的由來如下:
TREC是一系列由美國國家標準技術研究所(National Institute of Standards and Technology,NIST)以及一些美國政府機構所主辦的會議。該會議提供大量測試數據集合、統一的評價標準以及一個爲感興趣者提供測試結果交流的論壇,旨在鼓勵信息檢索領域的研究。在2001年和2002年,TREC組織了一個視頻檢索項目,致力於研究數字視頻的自動分割、索引和基於內容的檢索。從2003年開始,這個項目發展成爲獨立的評價體系,即TRECVID,並以爲期2天的研討會的形式在TREC之前舉行。

目前TRECVID由Alan Smeaton和Wessel Kraaij組合協調,由Paul Over擔任項目負責人。

TRECVID每年舉行一次,年初的時候會公佈一個本年度的Guidelines
如2009年的Guidelines:http://www-nlpir.nist.gov/projects/tv2009/tv2009.html
Guidelines包括以下幾個方面的內容:
1、對前幾屆會議的研究成果做出總結,並提出本屆會議的研究方向,一般是四到五個方向,一個方向可以延續好幾屆,如"shot boundary determination"直到2008年才結束
2、對每一個研究方向所使用的測試數據做了詳細的說明,包括視頻的長度、大小、種類以及來源
3、測試數據的獲取方式,通常需要參會者填寫一些表格,經組織者確認後才能獲取數據的下載權限
4、對參會者提交的研究成果的詳細說明,包括程序所實現的功能、測試的結果以及對結果的評價,按前面提出的研究方向分別進行了說明
5、整個會議的時間表以及相關聯繫信息

從會議的時間表可以看到,每年的會議大致分以下幾個階段:
1、公佈Guidelines
2、提供測試數據下載
3、參會者向NIST提交實驗數據
4、NIST將評價結果分發給各參會者
5、參會者提交會議論文
6、舉辦研討會
7、公佈會議論文和演講稿

TRECVID會議全部結束後所公佈的資料是對整個會議的總結,非常有料!
如 TRECVID 2009--Goals, Tasks, Data, Evaluation Mechanisms and Metrics
http://www-nlpir.nist.gov/projects/tvpubs/tv.pubs.org.html#2009
內容包括:
1、所有參會者名單及其選擇的研究方向
2、各研究方向的參會者的研究結果,主要是測評結果的對比
3、各研究方向在本屆會議上所取得的研究成果的總結
4、所有參會者提交的論文

每年參加TRECVID會議的包括高校、研究所以及商業公司的研究機構,其中不乏Carnegie Mellon UniversityUniversity of OxfordAT&T LabsMicrosoft
Research Asia
這樣高水平的組織。應該說TRECVID代表了視頻檢索領域最前沿的研究方向,其每年提出的Tasks以及最後給出的Papers值得關注,所幸的是,這些資料都是完全免費地向大衆開放。

 

Resources & Reference:
1、TRECVID官方網站:http://www-nlpir.nist.gov/projects/trecvid

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章