基于文本挖掘的网络媒体报道研究.pdfVIP

·研究论文· 图书情报工作网刊 2011 年 6 月 * 基于文本挖掘的网络媒体报道研究 阮光册 上海海关学院基础部 上海 201204 [摘要] 探讨基于实体关系的文本挖掘机制，以文本挖掘为方法，辅以属性抽取、属性关系映射等方式， 以上海世博新闻媒体网络版报道为例，对新闻媒体网络版这种非结构化信息进行研究。在属性抽取时结合 相似度算法，使属性抽取的准确率得到提高。选取香港、台湾、境外媒体华语版、上海本地媒体对世博会 相关报道进行实证分析，基于内容对报道差异进行阐述，并得出结论。研究表明，运用文本挖掘对新闻媒 体文本进行分析和评价，可以挖掘出媒体报道的更多内涵，为情报分析提供思路。 [关键词] 文本挖掘 网络媒体 实体关系 属性抽取 上海世博 1 引言 随着信息技术的发展和网络信息资源的丰富，数字化信息不断改变着我们的思维方式和工作模式。然 而面对海量信息，如何发现并获取有价值的信息成为难题。如今，各种网络搜索引擎可以帮助人们进行有 效的信息检索和分类，但是利用这些工具检索出来的信息仍然是海量的。如何从检索到的海量信息中挖掘 出用户感兴趣的内容，并能对信息进行必要的分析、提炼成为信息管理、情报分析领域的新课题呢？本文 将运用属性抽取和文本挖掘的方法，以网络版新闻报道为例，对报道的内容进行分析，并挖掘出媒体报道 的内涵。 文本挖掘是数据挖掘技术中日益盛行的重要研究领域，同数据挖掘的区别在于文本挖掘主要处理非结 构化的文本数据，包括新闻文章、研究论文、书籍、期刊、报告、专利说明书、会议文献、技术档案、政 府出版物、技术标准、电子邮件消息及 Web 页面等，这些数据不像关系数据库那样具有规范格式，因此处 理难度都较高。同时，这些文档又大多采用自然语言描述，对挖掘提出更高的要求。从 1995 年 Feldman 正式提出文本挖掘的概念[1]至今，国外学者对文本挖掘的应用研究进行了很多有益的探讨，这方面最主要 的研究集中在文本挖掘理论体系与技术手段方面，获得的成果有文本挖掘模型[2-3]、非结构化文本文件特征 抽取与文本中间表示[4-6]、文本挖掘算法 [7-8] 、语义关系挖掘[9-10]、文本聚类与主题分析[11-12]等，对文本挖掘 国外学者已经形成了一套较成熟的理论体系，并且应用于多个领域，如网络聊天室文本流主题跟踪[11]、在 线新闻实时监控[12] [13] 、专利数据分析 等。最近几年，国内学者对文本挖掘的关注度开始提高，但仍然处于 吸收国外研究成果阶段，在理论方面，对文本特征抽取和文本聚类[14-16]等进行了一定的探讨；在实践应用 中，文献[17]运用文本挖掘的方法对政府工作报告中用户感兴趣的区域经济关系进行了实证研究，并得到 相关结论。通过国内外的研究对比，笔者发现，无论在理论探讨还是实践应用方面，国内的文本挖掘研究 还不够深入，仍处于小规模实验阶段。 本文拟运用文本挖掘的基本方法，就我国台湾、香港及其他境外媒体华语版及上海本地媒体对上海世 博会相关报道进行分析，研究的新闻文本量近 29 000 篇，通过属性抽取分析媒体报道的差异。 2 网络媒体文本挖掘方法分析 *本文系2010上海市哲学社会科学规划课题一般项目“境内外主流媒体网络版报道差异的情报分析——以2010上海世博会 为例”（批准号：2010BTQ003）研究成果之一。 24 图书情报工作网刊 ·研究论文· 2011 年 6 月 本次实验选取的新闻样本为境内外主流媒体网络版，主要包括上海本地的《解放日报》、《新民晚报》 等，香港地区的《大公报》、《香港商报》、《香港文汇报》等，台湾地区包括《经济日报》、《联合报》、《中 国时报》等，国外媒体中文版包括《星洲日报》(马来西亚)、《明报》(加拿大)、《联合早报》(新加坡)等， 共计 30 家中文主流媒体。 作为一种文本信息，新