- 1、本文档共8页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
基于最小语言学资源资源受限领域命名实体识别
基于最小语言学资源的资源受限领域命名实体识别
涂兆鹏 姜文斌 刘群 林守勋 廖剑 吴克文
智能信息重点实验室 B2B 国际站算法组
计算技术研究所,中国科学院 阿里巴巴(中国)网络技术有限公司
{tuzhaopeng,jiangwenbin, liuqun, sxlin}@ {jian.liaoj, kewen.wukw}@
提高最终的翻译性能(Jiang et al., 2007; Zhao et
摘要
al., 2008; Yang et al., 2008) 。
如何在资源匮乏的大规模数据(如互联 如何识别存在大规模生语料、资源匮乏领
网纯文本数据)上识别命名实体是一个 域的命名实体,也引起了广大研究者的兴趣。
重要的问题。为解决该问题,我们使用 如果人工标注大规模的数据,将是一个极其消
简单的词典资源自动标注数据,然后将 耗人力和物力的工作,很不现实。传统的做法
命名识别问题转化为基于最大熵马尔可 是使用人工维护的词典或者使用规则方法识别
夫模型的序列标注问题。我们使用两种 网络数据中的命名实体。但是,互联网数据中
方法搜索结果:1)输出标注序列,并使 的命名实体具体如下特点:
用重排序方法对 k-best 结果进行重排
1. 新出现的命名实体多。在互联网中,由于
序;2 )使用变种的前向-后向算法计算
新名词层出不穷,所以出现了很多与之相
出候选命名实体的概率,并使用阈值过
关的新的命名实体。使用词典方法无法识
滤。实验表明,使用后种方法可以极大
别这些新词,而且人工维护词典也需要很
地提高命名实体识别的召回率和 F 值,
高的人力成本。
并可以更加灵活地根据需求控制准确率
与召回率。 2. 形式灵活多变。命名实体识别任务的困难
之处在于歧义问题,即一个单词可能出现
在命名实体的不同位置。比如电商领域
1 引言
中,单词 screen 可以出现在命名实体的不
命名实体,是指人名、机构名、产品名以 同位置:
及其他所有以名称为标识的实体。当前主流的
(a) screen guard mirror for iphone4S
命名实体识别方法都是使用有监督的机器学习
(b) large touch screen panel
方法,依赖人工标注好的训练语料。随着互联 (c) high quality led advertising screen
网的发展,涌现了越来越多的网页数据。识别
您可能关注的文档
- 吉林省省属高校科师范生免费教育协议书.PDF
- 吉林银行股份有公司2015年资本构成信息附表.PDF
- 吉水县城上下老街历文化街区保护项目(棚户区改造)房屋.doc
- 君不见黄河之水天上,奔流到海不复回。君不见高堂明镜.ppt
- 吴桥县小学英语教学坊简报第二期.docx
- 咸阳市重点产业发展向研究.PDF
- 响水县2017年度二期农村公路提档升级工程.doc
- 响水经济开发区压缩垃圾中转站固定水平式垃圾压缩设备采购.doc
- 咸阳市天然气有限公彬县新民高端能.PDF
- 嘉义县97年校园品教育教学活动设计徵选实施计画.doc
- 高考数学一轮总复习课后习题 第三章 函数与基本初等函数 课时规范练8 函数的奇偶性与周期性.doc
- 高考数学二轮总复习课后习题 考点突破练与专题检测6 空间几何体的结构、表面积与体积.doc
- 高考数学一轮总复习课后习题 第十章 统计与成对数据的统计分析 课时规范练57 统计.doc
- 湘教版高中地理必修第一册精品课件 第四章 地球上的水 第1节 第1课时 水循环.ppt
- 湘教版高中地理选择性必修1自然地理基础 第1章 地球的运动 第1节 地球的自转.ppt
- 湘教版高中地理选择性必修1自然地理基础 第1章 地球的运动 第2节 第1课时 地球公转 黄赤交角及其影响 正午太阳高度的变化.ppt
- 湘教版高中地理选择性必修1自然地理基础 第1章 地球的运动 第2节 地球的公转 第2课时 正午太阳高度的变化 分层作业册.ppt
- 湘教版高中地理必修第二册精品课件 第2章 城镇和乡村 第3节 第2课时 城镇化对地理环境的影响.ppt
- 湘教版高中地理选择性必修1自然地理基础 06-模块综合测评.ppt
- 湘教版高中地理选择性必修1自然地理基础 第1章 地球的运动 第2节 第2课时 昼夜长短的变化 四季的更替.ppt
最近下载
- 小学:音乐人音版三年级下册第一单元《爱祖国》大单元设计.docx
- 华润饮料(1991.HK)新股纵览:包装纯净饮用水龙头企业,锐意进取止于至善.pdf
- 办文办会办事流程图.doc
- 常山北明:拟处置资产涉及的闲置报废机器设备资产评估报告.docx VIP
- 昭和电工正式量产 VGCF-等级纳米碳管-VGCF-项目介绍.docx
- 表面改性剂祥解.ppt
- 教学课件:第2讲《办好中国的事情关键在党》.pptx VIP
- (最新)24年秋统编版四年级语文上册习作:我的家人【教案及反思】.docx
- 安川骏马系列.pdf
- 初中地理综合实践作业设计方案-七年级(七)绘制学校平面图-人教版七年级上册.docx VIP
文档评论(0)