一个英语单词的格式化算法.PDF

中 文 信 息 学 报 第 卷 第 期 一个英语单词 的格式化算法 陈震杰 南 京 邮 电学 院 计 算机 系 珍晖 夏振华 南 京航 空学 院 计 算机 系 摘〔要 〕 本文介绍 了一 用 于 然 言处 理 统 的 语单 词 的 格 式 化 处理算 个 自 语 系 英 。 、 法 算 法 以词 缓切 令策略为基砂 , 日的是减 少 系统机器字典的兄余信 息 提 高系统 的识词能 力。 在 附录 中给 出 了一个 用 一 语 言实现 的格式化程序。 己 【 健扩 二 口万 一 在 然 言处理 系 , 一 字 , 用 和相 的词 , 系 以 自 语 统 中 通常都有 部 典 来存放单词 应 性信息 统 这些信息 为基础进 行 自然语言的处理 。 我们知道 , 英语单词 在形式上是有很 多变化 的 名词和代词 有性 、 数 的变化 形容词和 副词有 比较级 的变化 动 词则有 人称 、 时态和语态等形式 的变化 一些不 同词类之 间还可能 。 有派生 变化 由于上述这 些变化 大 多有一定变化规律 , 在设计一部机器字典时就没有必要将 每个 单词及 其各种变化形式都收人 字典 。 单词格 式化处理 的主要 目的就是要减少字 典 中的冗 。 余信 息 , 提高系统 的识 词能力 、 作 者在 实践 中以 “ 词缀切分 计 ” 策略为基础 借 用人工智能领域 的一些 。 研究成果和方法 , 设计 出 了一个英语单词 的格式化算法 该算法具有 下述三个特点 机器 字典 、 由构词规 则组 成 的词法 库和格 式化程序相互独立 。 使得字典和词 法库 的增 删和 系统无关 。 便于 系统维护 。 变形 词一般不 收入字典 。 字典 的冗余信息 比较少 。