2005年度863计划中文信息处理与智能人机接口技术评测-中国科学院.PDFVIP

中 文 信 息 学 报 第20卷增刊 JOURNALOFCHINESEINFORMATIONPROCESSING Vol.20SUPPLEME NT 文章编号:1003一0077(2006)增刊一0001一06 2005年度863计划中文信息处理与智能人机接口技术评测回顾 钱跃良，林守勋，刘 群，刘 宏 (中国科学院计算技术研究所，北京 100080) 摘要:2005年度863计划中文信息处理与智能人机接口技术评浏于2005年9月20-22日举行。本次评 测涉及机器翻译、语音识别、信息检索三大类技术。本文给出了此次评测的组织过程、参评单位、评测方案、 数据准备、结果分析等各方面总体情况，更详细的情况在本论文集收集的各分项评测报告中给出。与往年的 863评测相比，本次评测的主要特点是全面采用了国际上通行的网上评测的方式，提供了大量的训练数据，并 且在评测研讨会上为参评单位提供了更加充分的交流机会。 关键词:技术评测;自然语言处理;人机交互;机器翻译;语音识别;信息检索 中图分类号二TP391 文献标识码:;A AReviewon2005HTRDP(863)EvaluationonChinese InformationProcessingandIntelligentHuman-MachineInterface QIANYue-liang,LINShou-xun,LIUQun,LIUHong (InstituteofComputingTechnology,ChineseAcademyofSciences,Beijing100080,China) Abstract;The2005HTRDP(863)evaluationonChineseinformationprocessingandintelligenthuman-machine terface executedinSeptember20一22,2005.Inthisevaluation,technologiesincludingmachinetranslation, usticsspeechrecognitionandinformationretrievalareevaluated.Thispapergivesanoverallintroductiontovarious aspectsofthisevaluation,includingorganizationprocess,participants,datapreparing,resultanalysis,andetc. Moredetailscanbefoundintheevaluationreportsonspecifictaskscollectedinthisproceeding.Comparedwiththe previousHTRDPevaluations,the2005evaluationhassomenewdistinguishes,including;adoptingtheintemet-based testmethodinsteadoftheon-the-spotmethod;providinglargescaletrainingdata;providingmorepresentationand discussiontimefortheparticipantsintheevaluationworkshop. Keywords;technologyevaluation;naturallanguageprocessing;human-machineinteraction;machinetranslation; speechrecognition;informationretrieval 1 引言 众所周知，在自然语言处理、人机交互等研究领域，大规模的数据资源建设与共享和公开 的技术评测，已经成为推动学科发展的两个重要的驱动力2-〔81。为了了解国内外在中文信息 处理与智能人机接口技术领域的现状，检查863计划信息领域计算机软硬件技术主题(以下 简称计算机主题)中相关课题的进展情况，促进交流和提高，推动技术进步和成果的应用与产 收稿日期二2005一11-02 定稿日期:2006-01一16 基金项目:国家863计划资助项