人工智能在自然语言处理中的应用初步研究.pdf

人工智能在自然语言处 理中的应用初步研究 . 四川师范大学 刘翔 2017.7 一个项目的需求 • 通过微信，实现以下功能： • 用户可以输入病情描述，了解挂号科室（即所谓“分诊”） • 用户可以通过过微信了解医院及及业务的基本情况（如科室分布、流程） • 怎么办？ 再如： • 有没有可能让电脑代替人来看论文，以节约研究者看论文的时间， 以便以比较小的代价了解学术前沿？ • 如何帮助学生解决阅读理解的问题？ 一、什么是人工智能 • Artificial Intelligence AI 人工智能（ ），英文缩写为 。它是研究、开 发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系 统的一门新的技术科学。 • 人工智能是计算机科学的一个分支，它企图了解智能的实质，并 生产出一种新的能以人类智能相似的方式做出反应的智能机器， 该领域的研究包括机器人、语言识别、图像识别、自然语言处理 和专家系统等。 二、自然语言处理概述 • 什么是语言？ • 语言是用于传递信息的表示方法、约定和规则的集合，它由语句组成， 每个语句又由单词组成；组成语句和语言时，应遵循一定的语法与语义 规则。 语言 词汇 语法 词 熟语 词法 句法 词素 构形法 构词法 词组构造法 造句法 语言的构成图 1 ．什么是自然语言理解 • 从微观上讲，语言理解是指从自然语言到机器（计算机系统）内 部之间的一种映射。 自然语言处理（ ，简称 ）就是用计 • Natural Language Processing NLP 算机来处理、理解以及运用人类语言（如中文、英文等），它属 于人工智能的一个分支，是计算机科学与语言学的交叉学科，又 常被称为计算语言学。 语言理解所包含的功能，即 的应用 NLP • 从宏观上看，语言理解是指机器能够执行人类所期望的某些语言 功能。这些功能包括： • 回答有关提问； • 提取材料摘要； • 不同词语叙述； • 不同语言翻译。 2 ．自然语言处理的兴起 • 值得一提的是，自然语言处理的兴起与机器翻译这一具体任务有 着密切联系。 • 由于人工进行翻译需要训练有素的双语专家，翻译工作非常耗时 耗力。更不用说需要翻译一些专业领域文献时，还需要翻译者了 解该领域的基本知识。世界上有超过几千种语言，而仅联合国的 工作语言就有六种之多。如果能够通过机器翻译准确地进行语言 间的翻译，将大大提高人类沟通和了解的效率。 3 ．自然语言理解过程的层次 • 语言的分析和理解过程是一个层次化的过程，它主要包括如下四 个层次： • 语音分析 • 词法分析 • 句法分析 言语 文本 • 语义分析 语音分析 OCR/标记化 形态变化 语法分析 语义解释