自然语言处理1 新手上路.docxVIP

1. 新手上路 自然语言处理(Natural Language Processing，NLP)是一门融合了计算机科学、人工智能及语言学的交叉学科，它们的关系如下图所示。这门学科研究的是如何通过机器学习等技术，让计算机学会处理人类语言，乃至实现终极目标--理解人类语言或人工智能。 美国计算机科学家Bill Manaris在《计算机进展》( Advances in Computers)第47卷的《从人机交互的角度看自然语言处理》一文中曾经给自然语言处理提出了如下的定义: “自然语言处理可以定义为研究在人与人交际中以及在人与计算机交际中的语言问题的一门学科。自然语言处理要研制表示语言能力和语言应用的模型，建立计算框架来实现这样的语言模型，提出相应的方法来不断地完善这样的语言模型，根据这样的语言模型设计各种实用系统，并探讨这些实用系统的评测技术。” 1.1 自然语言与编程语言的比较 比较 不同 例子 词汇量 自然语言中的词汇比编程语言中的关键词丰富，我们还可以随时创造各种类型的新词 蓝瘦、香菇 结构化 自然语言是非结构化的，而编程语言是结构化的 歧义性 自然语言含有大量歧义，而编程语言是确定性的 这人真有意思:没意思 容错性 自然语言错误随处可见，而编程语言错误会导致编译不通过 的、地的用法错误 易变性 自然语言变化相对迅速嘈杂一些，而编程语言的变化要缓慢得多 新时代词汇 简略性 自然语言