基于改进卡方统计量的藏文文本表.PDFVIP

第 卷 第 期 计 算 机 工 程 年 月 ■ 分 号 号： 文献 识 ： 类 ： 人工智能及识别技术 文章编 标 码 中图 于改进卡方统计量的藏文文本表示方法 徐 涛， 于洪志， 加羊吉 信息技 重 实验 ， 兰 族语 文字 室 北民族大 中国民 言 术 点 州 西 学 ： 理 是 、 文文 非 构化 藏文 本 为计 式， 藏文文 分类 文 类 领域特 抽 示 转换 机 够 数据 等 征 取 摘 要 藏 本表 是将 结 的 文 算 能 处 的 形 本 本聚 一 。 传 较 特征项 度， 容 语 损 。 ， 合向 空间 提 种 的前提 统的藏文文本表 方法 少考虑 间的关联 易造成 义 失 为 结 量 模 ， 出 新的 示 之 此 型 。 值 对比 文文 处理 每 一 藏文文本 方法 文本中词频统计 较高的部分询项作为 词项， 对藏 本 行断旬 ， 以 个旬 作为 表示 提取 进 子 算 本 。 验 果 传 能 个 境 题， 利 卡方统计量计 文 中词项与对比词项的关联 度 实 结 表明， 与 统的 向 空间模 相比， 该方法 更准 语 主 用 程 量 型 确 表 藏文文本。 地 示 ： 处理 进卡方 量 本表 ； 旬 向 空 型 关 词 藏文信息 ； 改 统计 ； 文 自 断 ； 间 键 示 动