面向大数据的计量数据采集与应用研究曹璐（电力系统及自动化论文资料）.docVIP

面向大数据的计量数据采集与应用研究曹璐（电力系统及自动化论文资料） 目录 TOC \o 1-9 \h \z \u 目录 1 正文 1 文1：面向大数据的计量数据采集与应用研究曹璐 1 1面向大数据的计量数据采集与存储架构设计 1 2计量大数据应用的挖掘处理流程设计 2 3利用大数据的计量数据应用 3 3.2为企业管理服务的其它数据应用 4 4结束语 4 文2：面向大数据时代的图书馆知识服务 4 1 大数据知识服务具有的特征 5 2 大数据时代图书馆面临的挑战 5 3 图书馆利用大数据在知识服务方面的创新 6 结束语 7 参考文摘引言： 8 原创性声明（模板） 9 正文 面向大数据的计量数据采集与应用研究曹璐（电力系统及自动化论文资料） 文1：面向大数据的计量数据采集与应用研究曹璐 1面向大数据的计量数据采集与存储架构设计 开展大数据应用，既是对多年来企业信息化项目建设所形成的信息资源的发掘利用，又是对企业信息化项目的持续改进与完善。通常企业在计量信息化方面会建设有流体能源计量、电力能源计量和物资计量等一系列围绕着计量管理业务的计量信息系统。这些计量信息系统项目都是以满足不同计量类型或不同业务领域的计量工作为目标而开发建设的，为了适应企业管理的综合分析与决策需要，就必须按照一定的主题对这些不同业务系统的数据进行挖掘处理，建设计量数据仓库，从而形成如图1所示的面向大数据的计量数据采集架构体系。 建设面向大数据的计量数据采集架构体系，主要有以下工作内容：（1）现有计量信息系统改造与完善。对现有的计量信息系统改造与完善的主要任务是为数据挖掘准备好“采集接口”，接口的核心内容是各计量信息系统为计量数据挖掘提供计量数据基础模型与访问方法。（2）计量数据仓库建设。首先要确定系统所包含的计量管理及相关的主题域，然后对每个主题域的内容进行描述，描述的内容包括主题域的公共码键、主题域之间的联系和充分代表主题的属性组。（3）计量数据提取工具设计。将各计量信息系统所分散采集的计量数据提取到计量数据仓库需要通过设计一个在数据挖掘领域称为“ETL”的数据提取工具来完成。ETL它是用来实现将数据从各计量信息系统的采集接口经过提取（Extract）、转换（Traform）和加载（Load）至数据仓库的三个基本过程。（4）共享接口设计。为了能够更加充分的利用计量数据，还需要提取EＲP、MES等各类企业信息化系统的数据，通常可以建设一个共享接口来从企业数据仓库提取计量管理所需数据，同时也通过其为企业管理的其他领域提供计量数据。 2计量大数据应用的挖掘处理流程设计 对计量大数据进行应用就是用户从一个特定的主题出发，经过定义主题、浏览数据、准备数据、生成模式、验证模式、应用模式等过程，最后形成分析结果提交给用户。 （1）用户与定义主题。大数据应用中的定义主题，就是用户从计量大数据应用的需求出发，利用各方面专家的经验和知识库中所积累的相关知识，再结合对数据仓库和模式库的了解来初步确定出解决具体问题的主题。（2）浏览数据与准备数据。根据主题的需要，对数据仓库中的相关数据进行检索浏览与准备处理，在这个过程中还可能需要结合所掌握数据的情况返回到主题的定义。（3）生成模式和验证模式。在明确了主题并准备了数据之后，还需要构建完成主题所需要的一整套数据存储模式（下面简称为“模式”），模式中包含了对某一类数据的结构、属性、联系和约束的描述。（4）应用模式形成分析结果。利用经过验证的模式对数据进行组织和处理，最后得出综合统计分析的结果提交给用户。在应用模式的过程中如果存在问题也是要返回到定义主题阶段重新进行主题的调整。 3利用大数据的计量数据应用 3.1利用计量数据的综合平衡分析结果，指导生产现场的能源管理工作 某公司下属的一个生产厂生活水有5条入口主管和75条消耗支管，这些水管都安装了计量表，其中除4条小口径间歇用水管的机械表外，76条管路的水表都实现了自动实时的计量数据采集入网。在进行对生产作业区的能源指标考核时，入口主管的供应量（二级计量）与用水支管的消耗量（三级计量）总是出现超过40%的损失量，造成了厂部与作业区在管理上的矛盾，这类能源供应量与消耗使用量的不平衡问题是大中型制造企业常见的现象。为了解决这类问题，首先确定了“能源二三级量平衡分析”的业务主题，结合计量数据仓库中的数据存储构建了如下的模式：计量管理{计量仪表代码、能源品种代码、计量级别、使用单位代码}、计量数据{计量仪表代码、数据采集时间、结算数据}，其中“计量管理”模式中存储着每个计量仪表的管理属性内容，而根据数据分析的不同要求，“计量数据”模式中对每个仪表数据的时间粒度可以为小时量、班量或日量。 应用“计量管理”和“计量数据