基于VC++人工分词及词性标注辅助程序设计与实现.docVIP

基于VC++的人工分词及词性标注辅助程序的设计和实现 马创新, 李斌 （南京师范大学语言科技中心，南京，210097） 提要：在语言研究中，经常要对语料进行分词和词性标注，我们使用VC++设计了一个人工分词及词性标注辅助程序，它能够根据预定的规则对标注后的语料进行检验，发现违反规则的情况就会给予提示，并且还设计了一个小键盘，减轻了标注者记忆词性标记的负担。我们使用这个辅助程序对大量的古代汉语和现代汉语的语料进行标注，结果证明，这个辅助程序既能够有效处理GB2312编码的简体汉字语料，也能够处理Unicode编码的繁体汉字语料，有效地提高了人工分词及词性标注的速度和正确率。 关键词：分词；词性标注；辅助程序；VC++； Design and Realization of the Assistant Program For Manual Word-Segmented and Part of Speech-Labeled Based on VC++ Ma Chuangxin, Li Bin ( Lan