營建中文檢索研究的環境.pptVIP

營建中文檢索研究的環境 吳美美 大 綱 背景 有關TREC 催生一個CTREC 結語 有關TREC 1992年起美國國家標準局和美國國防部尖端研究企畫署的資訊科技室開始組織TREC的活動。 TREC目的在透過提供大型的語料庫、統一的測試程序，有系統地整理其評鑑的結果，以促進網路資訊檢索技術的迅速發展。 日文測試語料庫 Information Processing Society of Japan (IPSJ) 和Real World Computing Project (RWCP)成功整合了Ricoh, NTT, Mitsubishi electric, Fujitsu Laboratories, NTT Data, Tokyo Institute of Technology, Univ. of Toyko, NACSIS, ULIS, SHAARP, NEC, Fuji Xerox, Toshiba, Keio Univ.等組織共同合作成立。 1998-1999即將開始實施。 催生一個CTREC 期望資訊檢索研究者和有關的專家學者共同研議，催生一個中文資訊檢索效能評估系統(暫時名之為CTREC)，以形成一個良好的中文檢索研究環境。 CTREC的目的 成立一個CTREC可以鼓勵更多中文資訊檢索研究者進行相關的檢索技術的研究。 中文化資訊檢索系統的研究人員正需要有一套效能評估系統來協助其研究發展的工作。 CTREC的目的 (續1) NIR日益普及，需要有一套效能評估系統來確保檢索之品質。 進一步促進跨語系的檢索(cross-language retrieval)成效。 CTREC的目的 (續2) 數位化圖書館(Digital Library, DL)正加速發展，中文檢索系統研究要加強以配合其應用。 CTREC若能成為國際通用的評估系統，則中文的繁簡字有可能在國際系統中並存並行，原有的文字不會因為科技的原因而式微。 建置CTREC的主要思考 可資使用的中文語料有那些？可否獲取？透過那些管道？ 合適的測試用檢索問題如何形成？ 評鑑的準則是什麼？如何決定？ 如何形成一個CTREC？ 了解TREC的運作方法 對CTREC的一些建議 CTREC的模式 語料 檢索問題 (topic) 評鑑量標及評鑑方法 CTREC實施的辦法(暫定) CTREC網頁 語料 檢索問題 (topic) CTREC檢索問題結構top, /topnumtitledescnarr 評鑑量標及評鑑方法 TREC利用Salton在麻省理工學院(MIT) SMART實驗室所開發的一套評鑑軟體檢驗各系統的評鑑結果。評鑑的主要依據，則仍是由同一位檢索者來進行相關判斷，而以計算出來的回現率和精確率，做為各系統的評比依據。CTREC對於評鑑量標的決定，應更為審慎，最好組成一個工作小組來共同討論決定。 CTREC實施的辦法(暫定) CTREC網頁 結語 CTRE的要素 推動的單位 語料 檢索問題 評比項目 評比準則 實施方法 結語：期待一個推動中文CTREC的單位 謝謝! 敬請批評指教! * * 運作方法(續) 運作方法(續) 模式 * *