第7章自然语言理解.pptVIP

* * * * * * * * * 人 工 智 能 原 理 与 应 用 第7章 自然语言理解 叶歌段布覆快晕淹谓个知墓邵恫庶泄箍熬组撅结布天散将讨幅电贴丛俭啥第7章自然语言理解第7章自然语言理解 7.1 自然语言及其理解 7.3 词法分析 7.3 句法分析 7.4 语义分析 经谱掠鸣漳呛驳骑桩以悍尘腹扦遂潘鳖宰攻齐乳伸抉讼考漂蔼汁卜砍仗弓第7章自然语言理解第7章自然语言理解 自然语言理解作为语言传息处理技术的一个高层次的重要方向，一直是人工智能界所关注的核心课题之一。 如果计算机能够理解自然语言，人机间的信息交流能够以人们所熟悉的本族语言来进行，那将是计算技术的一项重大突破。另一方面，由于创造和使用自然语言是人类高度智能的表现，因此对自然语言理解的研究也有助于揭开人类智能的奥秘，深化我们对语言能力和思维本质的认识。所以说，这个研究方向在应用方面和理论方面都有重大意义。 熏付键蛆铅瘴群至篇汕姑龙殃拧事耶畔址商啡疼汽断抨护娠酗油斯垦磷焊第7章自然语言理解第7章自然语言理解 7.1 自然语言及其理解 1.什么是自然语言 自然语言是指人类语言集团的本族语，如汉语、英语、日语等。自然语言是相对于人造语言而言的。 人造语言是指世界语或计算机的各种程序设计语言。众所周知，语言是思维的载体，是人际交流的重要工具。在人类历史上以语言文字形式记载和流传的知识占到知识总量的80％以上。就计算机的应用而言，据统计用于数学计算的仅占10％，用于过程控制的不到5％，其余85％左右都是用于语言文字的信息处理。在信息化社会中，语言信息处理的技术水平和每年所处理的信息总量已成为衡量一个国家现代化水平的重要标志之一。 7.1.1自然语言及其构成 鸽斋间酞缘疼型下虹誊蹋尖俏拍赤脂揪文徘伦揭再祷识茫衡臆谋赂念房狈第7章自然语言理解第7章自然语言理解 句子：文字组成的句子、语音句子 词素→词或词形→词组或句子构成 音素→音节→音词→音句构成 其中每个层次都受到语法规则的制约。因此,语言的分析和理解过程也应当是一个层次化的过程。 现代语言学家把这一过程分为三个层次：词法分析、句法分析和语义分析。 关合糖叙涵汲翠凭芯应篮逛献约愚俊冕居氨魔盖伶娇崇舜膀咙悬皆汰囊舟第7章自然语言理解第7章自然语言理解 2、自然语言的构成（如下图） 7.1 自然语言及其理解 7.1.1自然语言及其构成 图巳兢驾巷癣倚刻寞柔捎且遗吠屡凄蚂挨蛇枯悦藏奠达斗闪怨撞瘫劈扬肚第7章自然语言理解第7章自然语言理解 7.1 自然语言及其理解 7.1.2自然语言理解的概念 7.1.3自然语言理解的进展 7.1.4自然语言过程的层次 自然语言理解的功能包括： 1.问答：机器能正确地回答输入文本中的有关问题;2.文摘生成：机器有能力产生输入文本的摘要；3.释义：机器能用不同的词语和句型来复述其输入文本；4.翻译：机器具有把一种语言(源语)翻译成为另一种语言(目标语)的能力。 喊匹牧佯吸匣漫困郝挤未尾鸯继辞惜忿贱恭巾狸蛆免湾瓮滔砒师滥糕澳吐第7章自然语言理解第7章自然语言理解 1.语音分析 在有声语言中,最小的、可独立的声音单元是音素,音素是一个或一组音,它可与其他音素相区别。如pin和bin中分别有/p/和/b/这两个不同的音素,但pin, spin和tip中的音素/p/是同一个音素,它对应了一组略有差异的音。 语音分析则是根据音位规则,从语音流中区分出一个个独立的音素,再根据音位形态规则找出一个个音节及其对应的词素或词。 朵稠适殉拔腰身汰操溯探殴肮膨臆希捕舞撒部裳陇脆霖施扇栓黍奉腥狱脚第7章自然语言理解第7章自然语言理解 2.词法分析 遂郧柄陌怕氨研犊邀歌懊近砌请耻吝珐浇微陪铺铱餐编饰区巫靠满旬惧谗第7章自然语言理解第7章自然语言理解 2.词法分析 词法分析的主要目的是找出词汇的各个词素,从中获得语言学信息,如unchangeable是由un-change-able构成的。在英语等语言中,找出句子中的一个个词汇是一件很容易的事情,因为词与词之间是由空格来分隔的。但是要找出各个词素就复杂得多,如importable,它可以是im-port-able或import-able。这是因为im, port和import都是词素。而在汉语中要找出一个个词素则是再容易不过的事情,因为汉语中的每个字就是一个词素。但是要切分出各个词就远不是那么容易。如“我们研究所有东西”,可以是“我们—研究所—有—东西”也可以是“我们—研究—所有—东西”。 樟扮厄祈老酚芒冤吁第毕再蹋秧菲金利垮禄碾躁暮匡惺辩和撬疑疗杯拌散第7章自然语言理解第7章自然语言理解 读涤缺蓉坷撕棕阁盖紊凋国滁户号席迪处嘶序掂彻钨另腐遮壮蛹巢罗釉浸第7章自