词类共现频率的mapreduce并行生成方法 - 重庆理工大学学报.pdf

下载文档 降价啦

16
0
约1.84万字
约 6页
2017-09-06 发布于天津
举报
版权申诉
保障服务

词类共现频率的mapreduce并行生成方法 - 重庆理工大学学报.pdf

1、本文档共6页，其中可免费阅读2页，需付费100金币后方可阅读剩余内容。
2、本文档内容版权归属内容提供方，所产生的收益全部归内容提供方所有。如果您对本文有版权争议，可选择认领，认领后既往收益都归您。
3、本文档由用户上传，本站不保证质量和数量令人满意，可能有诸多瑕疵，付费之前，请仔细先通过免费阅读内容等途径辨别内容交易风险。如存在严重挂羊头卖狗肉之情形，可联系本站下载客服投诉处理。
4、文档侵权举报电话：400-050-0827(电话支持时间：9:00-18:30)。

第卷第期重庆理工大学学报自然科学年月词类共现频率的并行生成方法程兴国肖南峰华南理工大学计算机科学与工程学院广州摘要语料库在自然语言处理领域的应用越来越广泛词类共现频率的统计是其研究内容之一针对词类共现的计算特点给出了基于编程模型实现的并行方法即和方法虽然模式性能明显优于模式但其在词汇表很大时存在内存溢出问题针对此缺陷给出了划分词汇表的解决方法对输入词汇表进行拆分此过程可利用模型进行预处理实验结果表明利用的并行性能较好地提高海量语料库中词类共现频率统计的效率和性能关键词语料库词类共现频率自然语言处

第２７卷　第１１期重庆理工大学学报（自然科学）２０１３年１１月Ｖｏｌ．２７　　Ｎｏ．１１ＪｏｕｒｎａｌｏｆＣｈｏｎｇｑｉｎｇＵｎｉｖｅｒｓｉｔｙｏｆＴｅｃｈｎｏｌｏｇｙ（ＮａｔｕｒａｌＳｃｉｅｎｃｅ）Ｎｏｖ．２０１３  ｄｏｉ：１０．３９６９／ｊ．ｉｓｓｎ．１６７４－８４２５（ｚ）．２０１３．１１．０１１词类共现频率的ＭａｐＲｅｄｕｃｅ并行生成方法