语料处理中遇到的问题.doc

语料处理中遇到的问题： ● 词的切分歧义 瑞士/ns 的/u 前/f [国际/n 奥委会/j]nt 副/b 主席/n 、/w 比/p 萨马兰奇/nr 资历/n 还/d 深/a 的/u ８０/m 岁/q 老人/n 霍德勒/nr 认为/v ，/w 促进/v 工业/n 污染/vn 治理/vn 、/w 生态/n 保护/vn 等/u 有利于/v 环境/n 保护/vn 的/u 活动/vn 向/p 市场/n 行为/n 转变/v 。/w 驻/v 华盛顿/ns 日/q(Ng-q) 出生/v 于/p 我/r 国庆/t 名/q 著名/a 教授/n 民政/n 部门/n 下发/v 给/p 电视/n 节目/n 的/u 生产/v 自/p 我国/r 在/p 内蒙古/ns 从/p 不同/a 方向/n 当地/s 人民/n 生活/vn 水平/n 话/n 语重心长/I 真切/ad 感受/v 到/v 旅游业/n 已/d 中/j 英/j 两/m 国/n 睁/v 开/v 眼/n 部长/n 孙/nr 广相/nr 中外/j 文化/n 冲突/v 中国/ns 民航/n 正如/p 今年/t 前/f 入学/v 报到/v 时/Ng 人民/n 政协/j 作为/p 其中/r 国家/n 传达/v 江/nr 泽民/nr 主席/n 产品/n 质量/n 不/d 一定/d 局限/v 于/p 不断/d 交换/v 安南/nr 面/n 商/Vg 其中/r 将/p(d-Ng-p)  兼类词的处理 490个兼类种类，在7万词表中共有3219个词有兼类现象（有些缩略语还不在内） a-A a-Ag A-Ag a-Ag-Dg-n-v a-Ag-d-Ng-v a-Ag-Ng a-Ag-Ng-Vg a-Ag-V A-Ag-v a-Ag-Vg a-A-n-Ng# a-A-v a-b a-b-d-Tg-v a-Bg-d-N a-Bg-Ng a-Bg-Ng-q a-Bg-Ng-Vg a-b-Ng a-c a-d a-D-Dg a-Dg a-Dg-k-Ng-v a-Dg-Ng a-Dg-n-Ng#-v a-d-h-k-Ng a-d-h-v a-d-m-Ng-v a-d-n a-d-Ng a-d-Ng-q-v-V a-d-Ng-v a-d-Ng-v-V a-d-Ng-V-Vg a-d-n-v a-D-n-Vg a-d-v a-d-Vg A-d-v-V A-e-u-v a-e-Vg a-f-Ng Ag-b Ag-Bg-Ng Ag-Bg-Ng-o-p-v Ag-b-Ng Ag-b-Ng-v Ag-b-n-v-V Ag-c-j-Ng-Vg Ag-c-Ng Ag-c-Ng-v-Vg@ Ag-c-n-Ng#-p-q-v Ag-d Ag-Dg Ag-Dg-k-v Ag-Dg-Ng Ag-Dg-Ng-j Ag-Dg-Ng-q-v Ag-Dg-Ng-v Ag-Dg-Ng-Vg Ag-Dg-q-v-Vg@ Ag-Dg-v Ag-D-j Ag-d-Ng Ag-d-Ng-Tg-Vg Ag-d-Ng-Vg Ag-D-Ng-v-V Ag-d-q-v Ag-e Ag-h Ag-j Ag-j-Ng Ag-j-Ng-Tg Ag-k-Ng Ag-Mg-Ng Ag-n Ag-Ng Ag-Ng-o-Tg Ag-Ng-q Ag-Ng-Q Ag-Ng-q-Tg-Vg Ag-Ng-q-Vg Ag-Ng-r Ag-Ng-r-v Ag-Ng-V Ag-Ng-v Ag-Ng-Vg Ag-Ng-v-Vg@ Ag-n-Ng# Ag-n-Ng#-q-v Ag-n-Ng#-q-Vg Ag-n-Ng#-V Ag-n-Ng#-v Ag-n-Ng#-Vg Ag-N-o-q-v Ag-n-q Ag-n-q-Vg Ag-n-R Ag-n-v Ag-n-Vg Ag-o Ag-q Ag-q-v Ag-r Ag-R-Vg Ag-Tg Ag-Tg-Vg Ag-v Ag-V Ag-Vg Ag-Vg-y Ag-v-V Ag-v-Vg@ Ag-V-Vg a-h-Ng a-j-Ng-Vg a-j-v a-k-Ng-v A-k-n-q-Vg a-Mg-Ng a-m-v A-n a-n a-Ng A-Ng a-Ng-q-v a-Ng-Q-v a-Ng-Tg a-Ng-Tg-v a-Ng-v a-Ng-V A-Ng-V A-Ng-v a-Ng-Vg a-Ng-v-Vg@ A-n-Ng# a-n-Ng# a-N-Ng-p-v-V a-n-Ng#-q A-n-Ng#-q-v a-n-Ng#-v A-n-Ng#-V a-n-Ng#-Vg