基于条件随机场的语气词用法自动识别研究.pdfVIP

计算机工程与设计 ComputerEngineeringandDesign 2011，Vo1．32，No．113929 基于条件随机场的语气词用法自动识别研究 周溢辉 ， 昝红英 ， 穆玲玲 (1．河南商业高等专科学校计算机应用系，河南郑州450044；2．郑州大学信息工程学院，河南郑州450052) 摘 要：研究了基于条件随机场的语气词用法 自动识别，把语气词用法识别问题看作序列标注任务 ，将语气词上下丈的词 语 、词性以及词语和词性的复合作为特征建立特征模板来确定语气词的用法。实验数据表明，与规则方法相比，大部分常用 语气词 的常用用法的识别准确率有 了明显的提升，该方法在语气词用法识别任务中具有一定的有效性。 关键词：自然语言处理；虚词知识库；语气词；用法识别；统计；条件随机场 中图法分类号：TP391 文献标识码：A 文章编号：1000—7024(2011)11-3929．05 Studiesonusages’ recognitionofChinesemodalitybasedonCRFs ZHOU Yi—hui， ZAN Hong—ying~， MULing—ling (1．DepartmentofComputerApplication，HenanBusinessCollege，Zhengzhou450044，China； 2．CollegeofInformationEngineering，ZhengzhouUniversity,Zhengzhou450052，China) Abstract：Thetaskoftheusages’ recognitionofthemodem ChinesemodalityiSresearched．Themethodbasedonruleshasitsown limitation．Aimedatthisproblem，statisticalmethodisadoptedtorecognizetheconlmonChinesemodalit)r’ usagesusingconditional randomfields (CRFs)．SomeoftheexperimentresultiSbetterthallthemehtodwhichbasedonurles．Thisindicateshtatthemethod basedonCRFshavecertaineffectiveontheproblem oftheusages’ automaticrecognitionofChinesemodality Keywords：naturallanguageprocessing；functionalwordknowledgebase；modality；usages’ recognition；staffstics；conditional random fields(CRFs) O 引 言 该方法在语气词用法自动识别中有一定的有效性。 1 相关研究 虽然在虚词中语气词的数量不多，但是 由于其意义较为 空灵，在所有的虚词词类中，语气词的意义是最难琢磨的。在 目前有关语气词的研究很多，但大部分都是面向人用的， 人类语言的交际过程中可以通过语调、重音等轻松的体现出 在面向自然语言处理的虚词知识库方面，俞士汶等…指出 “广 “语气”，但在 自然语言处理过程中只有通过语气词的使用来 义虚词”包括副词、语气词、助词、连词、介词等；咎红英等 提 研究语句中的语气范畴。语气词不仅可以表现语句中的语气 出了面向自然语言处理的汉语虚词研究与广义虚词知识库的 范畴，还具有如停顿标记、话题标记的标记功能和完句功能。 构建，并对现代汉语副词用法进行了形式化描述；刘锐等 完 因此，完成语气词用法的自动识别在 自然语言处理中具有重 成了基于规则的副词用法 自动标注；咎红英等 实现了基于统 要意义。 计的副词用法