CLEF

CLEF（Cross-Language Evaluation Forum）是在歐盟數字圖書館計畫支持下於2000年成立的跨語言信息檢索開放評測平台。其目標聚焦於跨語言及多語言信息檢索技術的評估與最佳化，截至2022年仍以此為核心方向。該平台涵蓋多項評測任務，包括抄襲檢測、臨床信息抽取、社會圖書搜尋等，吸引了全球多所知名高校和研究機構參與。例如，2013年PAN@CLEF評測中，黑龍江工程學院計算機科學與技術學院團隊在文本對齊任務中獲得兩項第一。

基本介紹

• 成立時間：2000年  
• 主辦方：歐盟數字圖書館計畫  
• 目標領域：跨語言/多語言信息檢索  
• 主要評測任務：抄襲檢測、臨床信息抽取、圖書搜尋   
• 參與國家：11國（2012年數據） 

歷史沿革

CLEF自2000年由歐盟支持成立後，逐步發展為國際知名的跨語言信息檢索評測會議。2003年增設多語言問答系統評測項目，並於2009年引入PAN抄襲檢測評測。

評測任務與技術方向

• 抄襲檢測（PAN@CLEF）：自2009年起提供標準測試數據，要求參賽團隊提交軟體進行自動化比對。2013年評測聚焦文本對齊任務，包含隨機混淆與翻譯混淆兩類檢測。
• 臨床信息抽取：2013年開展相關評測，為後續SemEval系列評測提供數據與方法基礎。
• 社會圖書搜尋：2014與2016年連續舉辦，北京科技大學團隊在此任務中多次位列榜首。
• 問答系統：2003年起設立單語/多語言任務，採用MRR、CWS等指標評估系統性能。

參與與成就

截至2013年，CLEF評測吸引英國謝菲爾德大學、捷克馬薩里克大學、英國薩里大學等國際團隊參與。中國機構表現突出：

• 黑龍江工程學院在2012年PAN@CLEF評測Detailed Comparison任務中獲第一，系當年唯一中國參賽隊伍；
• 2013年黑龍江工程學院計算機科學與技術學院團隊在PAN@CLEF抄襲檢測評測中獲得兩項抄襲檢測任務冠軍。

學術影響

CLEF被《中文信息學報》列為跨語言檢索研究的重要實驗平台，其2000年的中間語言方法驗證為後續研究提供關鍵依據。歐洲語言間檢索效率可達單語系統的80%-90%，但亞洲語言間仍存在顯著差距。