人工智能基础08__自然语言理解.ppt

合肥工业大学 人工智能与数据挖掘研究室 */24 合肥工业大学 人工智能与数据挖掘研究室 */24 目录 第一章　绪论 第二章　知识表示 第三章　搜索技术 第四章　推理技术 第五章　机器学习 第六章　专家系统 第七章　自动规划系统 第八章 自然语言理解 第九章 智能控制 第十章 人工智能程序设计 8.1 语言及其理解的一般问题 8.1.1 语言和语言理解 1. 语言的构成 　 语言是人类进行通信的自然媒介，它包括口语、书面语以及动作语(如哑语和旗语)等。 语言使用于传递信息的表示方法、约定和规则的集合。 语言由语句组成，每个语句又由单词组成；组成语句和语言时，应遵循一定的语法与语义规则。 　　语言由语音、词汇和语法构成。 语言的基本属性：语音和文字 8.1 语言及其理解的一般问题 8.1.1 语言和语言理解 　 语言是音义结合的词汇和语法体系，是实现思维活动的物质形式。 　　语言是以词为基本单位的，词汇又受到语法的支配才可构成有意义的和可理解的句子，句子按一定的形式再构成篇章等。 语法是语言的组织规律。语法规则制约着如何把词素构成词，词构成词组和句子。语言正是在这种严密的制约关系中构成的。用词素构成词的规则叫构词规则。语法中的另一部分就是句法。句法也可分成两部分：词组构造法和造句法。词组构造法是词搭配成词组的规则。造句法则是用词或词组造句的规则。 8.1 语言及其理解的一般问题 8.1.1 语言和语言理解 　　 另一方面，语言是音义结合的，每个词汇有其语音形式。自然语言中所涉及的音素并不多，一种语言一般只有几十个音素。由一个发音动作所构成的最小的语音单位就是音素。 语言 词汇 语法 词 熟语 词素 词法 句法 构形法 构词法 造句法 词组构造法 8.1 语言及其理解的一般问题 8.1.1 语言和语言理解 2. 语言的理解 　　微观：语言理解是指从自然语言到机器(计算机系统)内部之间的一种映射。 宏观：语言理解是指机器能够执行人类所期望的某些语言功能。这些功能包括： （1）回答有关提问； （2）提取材料摘要； （3）不同词语叙述； （4）不同语言翻译。 8.1 语言及其理解的一般问题 8.1.1 语言和语言理解 　　对自然语言的理解却是一个十分艰难的任务。自然语言不仅有语义、语法和语音问题，而且还存在模糊性等问题。 　 自然语言理解的困难是由下列3个因素引起的： （1）目标表示的复杂性； （2）映射类型的多样性； （3）源表达中各元素间交互程度的差异性。 　　自然语言理解是语言学、逻辑学、生理学、心理学、计算机科学和数学等相关学科发展和结合而形成的一门交叉学科；它能够理解口头语言或书面语言。 8.1 语言及其理解的一般问题 8.1.1 语言和语言理解 　　语言理解包括下列几个方面的内容： 　　（1）能够理解句子的正确词序规则和概念，又能理解不含规则的句子。 　　（2） 知道词的确切含义、形式、词类及构词法。 　　（3）了解词的语义分类以及词的多义性和歧义性。 　　（4）指定和不定特性及所有(隶属)特性。 　　（5）问题领域的结构知识和时间概念。 　　（6）语言的语气信息和韵律表现。 　　（7）有关语言表达形式的文学知识。 　　（8）论域的背景知识。 8.1 语言及其理解的一般问题 8.1.2 自然语言理解研究的进展和发展趋势 1. 研究进展 机器翻译是自然语言理解最早的研究领域。 （1）萌芽时期（20世纪40年代~60年代中期） 1949年 俄-英和英-俄文字的机器翻译 1956年 N.Chomsky形式语言和转换生成语法理论 1966年 美国科学院报告，否定性结论 （2）复苏发展时期（20世纪60年代后期~80年代中期） 关键词匹配技术；句法-语义分析技术。 MIT的SIR系统、ELIZA系统 8.1 语言及其理解的一般问题 8.1.2 自然语言理解研究的进展和发展趋势 句法方面理论研究成果：约束管辖理论、扩充转移网络、词汇功能语法、功能合一语法、广义短语结构语法、句法分析算法、… 语义分析方面：格语法、语义网络、优选语义学、蒙塔格语法、… 进入80年代之后，自然语言理解的应用研究广泛开展，机器学习研究又十分活跃，并出现了许多具有较高水平