2007自然语言处理的计算模型_张钹.pdfVIP

第2 1 卷 　第 3 期 中文信息学报 Vol . 2 1 , No . 3 2007 年 5 月 J OU RN AL O F C H IN ESE IN FO RMA T ION PROCESSIN G May , 2007 文章编号 : (2007) 编者按 : Int er net 时代对中文信息处理提出了更多、更新的需求 , 同时 ,致力于中文信息处理研究的 队伍也在不断地壮大 。在这支队伍中 ,既有在这个领域里长期辛勤耕耘的老兵 ,也有初出茅庐的新 ( ) 人 。为了使研究者们得以在更高的起点上开展研究 ,我们特向该领域 或相关领域 的资深专家和 学者约稿 ,这些稿件或是多年研究成果的厚实积累以及发轫于斯的深刻思考 ,或是具有前瞻性的前 沿课题探索 ,或是相关研究工作系统而深入的综述 。我们设立了一个约稿专栏 , 陆续刊登此类稿 件 , 以飨读者 。本期刊登其中的2 篇 ,分别是张钹院士的“自然语言处理的计算模型”、黄昌宁教授 等的“中文分词十年回顾”。相信这些论文对读者全面 、深刻地了解乃至理解相关学术问题 ,一定会 大有裨益 。 自然语言处理的计算模型 张 钹 (清华大学 计算机系 ,北京 100084) 摘 　要 : 本文讨论自然语言处理的计算模型 。目前已经存在有各种类型的语言计算模型 ,如分析模型 、概率统计模 型、混合模型等 ,这些模型各具特色 ,并存在其自身的局限性 。自然语言处理作为一个不适定问题 ,我们将讨论求 解这类问题的本质困难 ,面临的挑战 , 以及解决这些困难的途径 。 关键词 : 人工智能 ; 自然语言处理 ;计算模型 ;分析模型 ;概念统计模型 ;混合模型 ;不适定问题 中图分类号 : TP39 1 　　　　　文献标识码 : A The Computational Model s of Natural Language Processing ZHAN G Bo (Dep art ment of Comp ut er Science Technology Tsinghua U niver sit y , Beij ing 100084 , China) Abstract : In t hi s p ap er , we will di scu ss t he comp ut ational model s of nat ural language p rocessing . There have been several kinds of comp ut ational model s such as analytical mo del , st ati stical mo del , hybrid model , etc ; each ha s it s own charact eri stics and limit ation s. A s an illpo sed p roblem , we ’ll di scu ss what t he essential har dness t he nat ural language p rocessing ha s , what challenge we will confront wit h , and w