飔拓深度学习与自然语言处理.pdfVIP

INSIGHT THE FUTURE 深度学习与自然语言处理 2017 03 25 目录 1、自然语言处理 2、深度学习 3、舆情分析 4 、智能聊天机器人 1 自然 语 言 处 理 介 绍 NLP应用前景 • NLP前景 • 日常工作中80%的信息来源于语言 ，处理文本的需求在不断增长 • 文本是人类知识最大的存储源 ，并且文本的数量在不停地增长 • 电子邮件、新闻、网页、科技论文等 • NLP应用 • 老师 ，医师 ，会计师 ，律师 ，股票交易师 ，理财师 ，算命师。。。 • 老司机 ，老客服 ，老销售 ，老助理 ，老棋手。。。 自然语言处理的层次 • 语音分析 ：从语音流中区分出一个一个声音单元音素 • 词法分析 ：从句子中切分 出单词、找 出词汇的各个词素 ， 确定单词的词性、词义等。 • 句法分析 ：对句子和短语的结构进行分析 ，找 出词、短语 等的相互关系及在句子中的作用等。 • 语义分析 ：识别一句话所表达的实际意义。 • 语用分析 ：研究语言所在的外界环境对语言使用所产生的 影响。 语义与语用 • 同一词语在不同的 “语境”中具有不同 “语义” • 例如 ：中国奥运史上十大女杰的精彩 “转身” • 病毒 • 计算机领域 ：计算机病毒 • 医学领域 ：生物学病毒 中文 英文 学生们都来了 All the students are here. 李教授都来了 Even Prof. Li is here. 编辑工作很难 Editing is very difficult. 怎样成为一个好的编辑 How to be a good editor? 分词歧义 • 例 ：南京市长江大桥 南京|市长|江大桥 南京市|长江|大桥 • 例 ：我们研究所有东西 • 我们--研究所--有--东西 （交叉歧义 ） • 我们--研究--所有--东西 把手放在桌上 • 把--手--放在--桌上 （组合歧义 ） • 把手--放在--桌上 词义消歧 • 机器翻