专22深度学习与自然语言处理-架构师大会20161029_改.pdfVIP

深度学习在自然语言处理上的应用 深度学习在自然语言处理中的应用 －李成华 目录 １ 自然语言处理 ２ 深度学习 ３ 深度学习在自然语言处理中的应用 自然语言处理 Natural Language Processing 自然语言的概念 什么是自然语言 • 语言是人类交际的工具，是人类思维的载体 • 人造语言：编程语言 ，包括C++, BASIC等 • 自然语言： • 形式 ：口语、书面语、手语 • 语种：汉语、英语、日语、法语… 语言学是研究语言规律的科学 NLP 的应用 NLP应用前景 • 据统计，日常工作中80%的信息来源于语言，处理文本的需 求在不断增长 • 文本是人类知识最大的存储源，并且文本的数量在不停地增 长 • 电子邮件、新闻、网页、科技论文、 用户抱怨信 NLP典型应用 • 智能搜索引擎、自动问答、信息获取、语义网 • 语音识别，文字识别、输入法 • 机器翻译，自动文摘，跨语言检索 • 文本分类、文本聚类、文本分析（结构、内容、情感）、文 本挖掘（主题跟踪：人物跟踪，企业跟踪)、文本过滤 自然语言处理的层次 语音分析： 从语音流中区分出一个一个声音单元音素 词法分析： 从句子中切分出单词、找出词汇的各个词素 ，确定单词的词性、 词义等。 句法分析： 对句子和短语的结构进行分析 ，找出词、短语等的相互关系及在 句子中的作用等。 语义分析： 识别一句话所表达的实际意义。 语用分析： 研究语言所在的外界环境对语言使用所产生的影响。 语义与语用 同一词语在不同的“语境”中具有不同“语义” 例如：中国奥运史上十大女杰的精彩 “转身” 病毒 计算机领域：计算机病毒 医学领域：生物学病毒 内容层的信息处理 形态丰富的语言（inflecting language ）：处理难 形态不丰富的语言（analytic language ）：处理更难 中文 英文 学生们都来了 All the students are here. 李教授都来了 Even Prof. Li is here. 编辑工作很难 Editing is very difficult. 怎样成为一个好的编辑