自动分词软件质量的评价模型-中国中文信息学会.PDFVIP

中 文 信 息 学 报 第 卷 第 期 、 自 分词 件 的评价 型 动 软 质量 模 曹焕 光 郑 家恒 山 西 大 学 计 算 机 科 学 系 。 【 要 】汉 动 分词 是 中文信 处理 的基 性工 近年 , 国已 制 了十 种 摘 语 自 息 砂 作 来 我 研 多 自 。 动 分 词软件 , 但 尚无评价此 类软件 的模 型 和 方 法 本 文针对 分 词软件 的特 点 , 提 出 了 自动 分 词 软件质量 的评价 准则 , 并对这 类软件 质量 的两个重 妥特性 令 词正确率和 切 令速 度 给 出 了定量 的度量 方法 。 己 【 坐犷 、 、产 二刁 中文 自动分 词是 汉语 自然语言处理 、 机器 翻译 、 电子 词典等信息处理 中的基础性 工作 。 二 近年来 , 我 国 已开 发 了多种现代 书面 汉语 自动分 词软件 , 在本质上 , 它们 都 是基 于形 式 的 词 。 匹配方案 虽然切分算法有许多种 , 但 实验 表 明 , 对某些社会科学方面 的资料 , 逆 向扫描切 分错误较少 对 由名 词连接 构成 新词较 多 的 白然 科 学 方 面 的文 章进行切分 时 , 正 向扫描较 。 好 本文 并不讨论具体 的分 词算法 及人工决策的原则 与策 略 , 而 着重研 究 自动分 词软件 的质 。 量评价 问题 越来越 多的 白动分 词软件 被研 究 出来 , 但 至今 尚没 有一 个对它 们进行评价和模 。 型和方法 对 于分 词软件而 言 , 不 仅要 求所研 制 的软件 在分词 的正确率和速度方面 满 足一 定 。 要求 , 而且要像 开发大型传统软件那 样 , 在各 个阶段 不断地进行评价 评价分 词软件 系统 的 目的主要是检查它 的准确性和 实用 性 。 分 词软件系 统 的评价应 当 由语 言学和计 算机科学 两 个领 域 的专家参加 ,