- 1、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。。
- 2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 4、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 5、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 6、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 7、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
一种多知识源汉语语言模型的研究与实现刘秉权王晓龙王宇颖.pdf
第 39 卷 第 2 期 计 算 机 研 究 与 发 展 V o l39,N o 2
2002 年 2 月 JOU RNAL O F COM PU T ER R ESEA RCH AND D EV ELO PM EN T Feb. 2002
一种多知识源汉语语言模型的研究与实现
刘秉权 王晓龙 王宇颖
( 哈尔滨工业大学计算机科学与工程系 哈尔滨 150001)
( @ . )
bingquan liu ho tm ail com
摘 要 针对汉语语言模型中知识获取不足的问题, 提出了一种统计与多种形式规则信息结合的机制, 将规则的
表示量化, 提出语法语义规则矩阵的概念, 通过扩充词网格、对基于最大可能性的 n 元概率值合理调整, 将短语构
成规则、二元语法语义规则、最少分词原则等融入统计模型框架, 构成多知识源语言模型, 模型应用于智能拼音汉
字转换系统, 明显提高了音字转换正确率, 并适于处理长距离和递归语言现象.
关键词 语言模型, , 音字转换, 规则矩阵
N gram
中图法分类号 391. 1
T P
RESEARCH ON A CH INESE LANGUAGE MOD EL BASED ON
M UL T I KNOWL ED GE SOURCES AND ITS IM PL EM ENTAT ION
, ,
L IU B ing Q uan W AN G X iao L ong and W AN G Yu Y ing
( , , 150001)
D ep artm ent of Comp u ter S cience and E ng ineering H arbin Institu te of T echnology H arbin
Abstract A m ethod of in tegrating statistical info rm ation and differen t k inds of ru les fo r Ch inese
language m odeling is p resen ted , w h ich rep resen ts the ru le as figu re, in troduces the concep t of
syn tactic and sem an tic ru les m atrix , and the em beds the ph rase ru les rep resen ted as CFG, the
,
syn tactic and sem an tic ru les and least segm en tation p rincip le in to the N gram statistical Ch inese
language m odel by aug
文档评论(0)