汉语实在文本的语义脚色标注.pdfVIP

  1. 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
  2. 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  3. 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  4. 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  5. 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  6. 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  7. 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
汉语实在文本的语义脚色标注

摘要 语义角色标注在机器翻译、文本理解等自然语言处理系统中是一项必需的任务,它需要 自动识别出句子中的谓词所关涉的论元结构。目前英语的语义角色标注系统很多,但汉语的 相关研究还比较少见。汉语语义角色的确定有其自身的特点,不应该照搬英语的标注规范与 方法。 本文首次采用了清华大学开发的汉语句法树库TCT进行汉语真实文本的语义角色标注 实验。这是语义角色标注的一种新的尝试,与以往的标注相比存在以下难点:(一)以往在 Propbank中的标注都是按照每个谓词不同的语义框架选择了一些句子进行标注,这样对于 自动标注会有帮助,但无法反映真实文本的情况,而1℃T中的句子都没有经过人工的筛选, 完全忠实于原来的文本,特别是汉语以分句较多为特点,而真实文本正反映了这个特点,增 加了标注的难度;(二)实验中使用了小规模的训练语料和测试语料,这使得标注难度大大 增加,而且为了验证标注方法的有效性,我们使用了5重交叉验证的方法,弥补了测试语料 较少的缺撼;(三)本文实验使用的测试语料中的大部分谓词词形都没有出现在训练语料中, 所以有关谓词框架的信息相对缺乏,而以往大部分测试语料中的谓词词形都会出现在训练语 料中;(四)我们在标注中需要处理大量的名动词,而以往汉语和英语的标注中都没有包括 名动词或名词化形式:(五)TCT树库中缺乏空语类标记,我们的系统需要自动判断与空语 类对应的论元。 针对以上难点,我们采用了新的标注方法,构造了一个适合在小规模真实文本上进行语 义角色标注的系统:(一)本文将统计和规则的方法结合起来,在规则制定的一些薄弱环节 上,如谓词在名词短语中,谓词和论元在不同分句中,时间和持续的区分等,确定了不同的 测试集、训练集,用决策树迸一步提高规则标注的准确率,并首次将规则标注的结果转换为 规则特征,结合其它特征一起进行语义角色标注实验。实验结果表明,规则特征能够有效避 免决策树对于训练数据的过适应(overfitting)问题,在标注结果上好于概率特征:(二) 我们的系统的识别过程分为四个步骤:首先用规则判定是否有谓词论元关系,接着用决策树 判定谓词论元关系,用规则确定成分的语义角色,用决策树确定成分的语义角色;(三)在 规则制定的过程中,我们充分利用句法和语义的对应关系,根据句法结构对谓词论元关系做 了分类,如主谓结构中的谓词论元关系、名词短语内部的谓词论元关系等,并根据不同的类 别采用了不同的识别策略;(四)汉语中的句式变换和倒装是影响汉语语义角色标注的主要 因素,我们对不同类型的句式变换和倒装进行了讨论,并制定了相应的判断语义角色的规则; (五)目前针对语义角色标注的资源还很缺乏,所以我们利用《同义词词林》等对谓词、名 词进行划分,建立了用于区分语义角色的谓词词表和名词词表。并通过对介词的分类构造了 一个介词词表,用于确定以介词为标记的论元的语义角色。 本文的实验方法反映了汉语在语义角色标注上的特点,并在开放测试和封闭测试上取得 了较好的效果,尽管使用的是真实文本,训练数据也比较少,但晟终规则加统计的方法的F 值达到了82%。 关键词: 自然语言处理语义角色标注句法结构规则决策树 2 Abstract SemanticRole isoneformulationofmachinetraslationand Labeling interpreting the the text.Itneedto thesemantic filIingrolesof sentence identify arguments in have theSRL used predicatesantimatically.ThoughsystemsEnglish many

文档评论(0)

yxutcangfp + 关注
实名认证
文档贡献者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档