教育大数据平台建设方案.pdfVIP

教育大数据平台建设方案

2016年7月14日

1.教育大数据平台建设3

1.1数据采集与治理系统建设3

1.2日志管理中心建设4

1.3元数据管理系统建设5

1∙4数据建模系统建设6

1∙5数据可视化系统建设7

2.大数据平台建设8

2.1权限管理中心建设8

2.2仪表板系统建设9

2.3分析报告系统建设9

2.4用户画像系统建设10

2.5智能预警系统建设10

2.6学生/教师发展中心系统建设11

2.7统一门户系统建设11

3.功能参数列表12

教育大数据平台建设

1∙

教育大数据平台的建设，无需学校现使用的各种软件系统的开走商，通过开发接口

的方式进行数据采集或对接，从而实现学校各系统之间数据无感知采集。并完成数据治理，

晟终实现数据融合，解决数据孤岛问题，为各个平台提供肖动化数据支撐。

通过对数据进行采集和治理，包含学校结构化数据、半结构化数据和非结构化数据，

保证数据的完整性和全面性，实现数据融合。根据分析的冃标和需要解决的问题结合全面

的数据，才能完成全面的数据挖掘与分析，从而实现数据多维度、有深度的应用，让数据

不仅仅是作为结杲输出，而是形成业务流程闭环，全方位应用于学生培养和学校Fl常工

作，为学校建设提供重要的依据。将学校各应用系统的数据进行采集和整合，打碳数据孤

岛，实现数据的共享和应用，为大數据分析打好基砒。

2.1数据采集与治理系统建设

提供可视化界面进行数据源接入的配置操作；采集方式不影响数据源所属服务器/

设备/数据库/Web服务的正常运行。支持不同网络之间的数据同步功能；支持不同类型

数据源之间的数据同步功能；提供可视化的数据集成功能，实现自动化的任务调度，并

智能化监控数据集成的过程。

在满足数据库的数据采集同时，学校老师也可自行导入数据。本数据采集工具优于

一般数据仓库或非大数据厂家的采集方式，可以让学校各系统在正常运行的情况下，进

行无感知全量或增量采集。

一般当前数据包含结构化数据、半结构化数据和非结构数据，且学校数据在使用不

同的系统时，数据多存储在不同的数据库，无法将数据进行集合处理为学校管理做出数

据支撑，也无法有效追溯数据问题。教育大数据平台的数据采集功

能正好可以解决学校数据集合处理的难题。

1.2日志管理中心建设

随着大数据和教育规模的不断发展，教育应用系统时时都在产生Fl志数据，不同类

型、不同格式的Fl志数据散落在各个地方，只有在系统或应用出现问题时才会一步步去

查找Fl志数据，不仅查找耗时耗力，还无法挖掘FI志数据中隐藏的价值。

Fl志数据晟需要的就是可以買正集中管理FI志数据，定位Fl志数据问題，提高效率,做

到FI志数据界面化、可视化。

Fl志管理就是简单、易用的FI志分析、管理工具，用于整合各类Fl志数据（结构

化、非结构化和复杂的应用系统FI志），提供搜索、存储、分析及可视化等一站式服务。

日志管理主要在于应用性强，接入服务进行使用即可采集F）志，F）志数据及时采集及分

析，高性能存储，且稳定、数据安全、高可用。对于高校，Fl志管理中心可以帮助其搭建

完善的网络Fl志，进行校园网络FI志数据的应用及监控，深度挖掘Fl志的大数据价值，

辅助学校管理。

2.3元数据管理系统建设

元数据管理支持学校用户查看数据库及数据表的分布情况且可下钻查看具体详情；

可查看每FI数据的增长情况；可查看元数据的详细信息；同时支持用户查看数据流向世

袭图（表级或宇段级），以图形化的方式展示数据间的血缘关系和影响关系。

数据血缘图清晰明了地描绘了数据是如何从底层一层层汇上来的，都用了哪些接口，

哪些数据表。由当前数据节点向下树形扩散，让学校进一步对于整体数据存储情况、增长

情况一冃了然。数据影响图展示了某实体表向上用于生成哪些实体（直接和间接），影响

哪些数据汇总程序（直接和间接），由当前数据节点向上树形扩散。

2.4数据建模系统建设

数据已成为一种重要的生产要素，在完成数据的收集和存储之后，数据的再组织和分

析建模就是下一步能把