人工智能中的语义分析技术及其应用-北京迪基透科技有限公司.PDF

融合论坛 INTEGRATION FORUM 人工智能中的语义分析技术及其应用 文/神州泰岳 中国国民经济和社会发展第十三个五年规划纲要指出，实施国家大数据战略，把 大数据作为基础性战略资源，全面实施促进大数据发展行动，加快推动数据资 源共享开放和开发应用，助力产业转型升级和社会治理创新。 一、人工智能语义分析技术 二、语义分析技术 语义分析（Semantic Analysis）是人工智 （一）基础技术（按照词语分析、句子分 能（Artificial Intelligence）的一个分支， 析、篇章分析来写） 是自然语言处理技术的几个核心任务，涉及语 分别从词汇级、句子级和篇章级三个层次 言学、计算语言学、机器学习，以及认知语言等 描述语义分析相关技术。 多个学科，语义分析任务有助于促进其他自然 1.词语级语义分析 语言处理任务的快速发展。人工智能中的语义 词汇层面上的语义分析主要体现在如何理 分析技术，特别是深度学习（Deep Learning） 解某个词汇的含义，主要包含两个方面：词义消 技术近年来发展迅猛，已经在围棋对弈、自动 歧和词义表示 驾驶、图像识别、语音识别等多个领域取得了 （1）词义消歧 突破性进展。 词汇的歧义性是自然语言的固有特征。词 语义分析指运用各种方法，学习与理解一 义消歧根据一个多义词在文本中出现的上下文 段文本所表示的语义内容，任何对语言的理解 环境来确定其词义，作为各项自然语言处理的 都可以归为语义分析的范畴。一段文本通常由 基础步骤和必经阶段被提出来。词义消歧包含 词、句子和段落来构成，根据理解对象的语言 两个必要的步骤:（a）在词典中描述词语的意义; 单位不同，语义分析又可进一步分解为词汇级 （b）在语料中进行词义自动消歧。例如“苹果” 语义分析、句子级语义分析以及篇章级语义分 在词典中描述有两个不同的意义:一种常见的水 析。一般来说，词汇级语义分析关注的是如何 果;美国一家科技公司。对于下面两个句子: 获取或区别单词的语义，句子级语义分析则试 她的脸红得像苹果。 图分析整个句子所表达的语义，而篇章语义分 最近几个月苹果营收出现下滑。 析旨在研究自然语言文本的内在结构并理解文 词义消歧的任务是自动将第一个苹果归为 本单元（可以是句子从句或段落）间的语义关 “水果”,而将第二个苹果归为“公司”。从上面 系。简单地讲，语义分析的目标就是通过建立 的例子中我们发现，词义消歧主要面临如下两 有效的模型和系统，实现在各个语言单位（包 个关键问题：（a）词典的构建；（b）上下文的建 括词汇、句子和篇章等）的自动语义分析，从而 实现理解整个文本表达的真实语义。 北京神州泰岳软件股份有限公司 42 软件和集成电路 SOFTWARE AND INTEGRATED CIRCUIT