科技发展动态分析系统的研究与设计-计算机技术专业毕业论文.docxVIP

万方数 万方数据 上海交通大学 学位论文原创性声明 本人郑重声明:所呈交的学位论文，是本人在导师的指导下， 独立进行研究工作所取得的成果。除文中已经注明引用的内容外， 本论文不包含任何其他个人或集体己经发表或撰写过的作品成果。 对本文的研究做出重要贡献的个人和集体，均已在文中以明确方式 标明。本人完全意识到本声明的法律结果由本人承担。 元54/λ飞名 签 者 作 文日期 元 5 4/ λ飞 名 签 者 作 文 上海交通大学 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定， 同意学校保留并向国家有关部门或机构送交论文的复印件和电子 版，允许论文被查阅和借阅。本人授权上海交通大学可以将本学位 论文的全部或部分内容编入有关数据库进行检索，可以采用影印、 缩印或扫描等复制手段保存和汇编本学位论文。 本学位论文属于 保密口，在一一年解密后适用本授权书。 不保密lSt。 (请在以上方框内打 .j ) 时文作者签名:司几乞 日期:泊/斗 年 /二L 月 功 日 日期)014年 2 上海交通大学工程硕士学位论文摘要 上海交通大学工程硕士学位论文 摘要 万方数据 万方数据 科技发展动态分析系统的研究与设计 摘 要 随着 Internet 的快速发展，网络媒体作为一种新的信息传播形式，已深入人们 的日常生活，来自国内外各大科技媒体，社交网络，以及论坛等互联网的科技数据越 来越多，针对我国科研院校使用传统的信息获取方式来搜集、管理科技信息，存在着 信息获取不全面、灵活性差、数据库安全性受到限制等缺点，如何能够快速直观地检 索科技信息、为用户统计和科技舆情的分析节约大量时间成为急需解决的问题。 本文介绍了当前科技发展信息获取的现状和发展趋势，分析了目前现有科技信息 发布系统的不足和薄弱环节，对系统开发中的关键技术和研究内容等相关知识进行深 入的探讨，为后续科技发展信息的高效、全面获取以及信息的智能动态分析提供一定 的借鉴作用。 在此基础上，本文针对科技信息的动态统计与分析，设计和开发了科技发展动态 分析系统。该系统基于.NET 平台应用基础数据库模型，利用网络爬虫技术、信息检 索与提取技术和网络舆情内容分析技术对科技发展相关资源进行筛选、集成、优化， 有效地整合了互联网上最新科技信息，采用 DataShire 中间件的分层设计思想统一对 信息进行利用和管理，对外提供统一的数据视图和综合决策分析支撑环境，生成舆情 分析报表，形成具有市场方向的科技动态发展报告。该系统融合了多种数据来源进行 舆情分析与统计，实现多种信息源接入，建立了数据仓库基础架构、自动数据抽取/ 转换/加载（ETL）机制以及利用多维分析和数据查询工具实现报表的生成和展示。 该系统在用户处进行了系统搭建与测试，具有最新科技动态发布，科技舆情分析 服务，信息查询与检索，用户权限分配与管理等主要功能，并实现了智能制造、健康 医疗、绿色能源、信息网络四大领域的舆情信息采集和动态分析，经过实际的应用证 明，该系统能够满足用户的需求。 I 关键词： 科技信息、动态分析、数据查询、ETL 机制、报表 II 上海交通大学工程硕士学位论文ABS 上海交通大学工程硕士学位论文 ABSTRACT RESEARCH AND DESIGN ABOUT THE DYNAMIC ANALYSIS SYSTEM FOR THE DEVELOPMENT OF SCIENCE AND TECHNOLOGY ABSTRACT With the rapid development of Internet, network media as a new form of information dissemination, has penetrated into peoples daily life. More and more data of Internet technology comes from the major domestic and international science and technology media, social networking, Internet forums and so on. In view of our countrys scientific research institutions to use traditional methods of obtaining information to collect and manage the science and technology information, The existence of information acquisition is not comprehensive, poor