大数据平台项目论证方案.docxVIP

项目名称 项目实施 必要性分析 项目实施 可行性分析  大数据平台及应用建设项目 大数据平台及应用建设项目 目前我校学校目前数据主要存在各个业务系统，数据标准不统一，信息孤岛现象严重，缺乏有效的数据交换共享方式，需要进行数据治理，建立全校统一数据标准，加快数据共 享交换效率；缺乏对全量数据的采集、管理、运维的大数据管理平台； ；同时学校原有业务系统办公程序繁琐，比如：管理者了解一个学生在校行为情况需要登录各个不同的业务系 统来查看学生信息；管理者对于教师科研、基本信息、在校行为等信息缺乏一个直观明了的了解方式，业务系统日常工作产生大量离线表格数据，缺乏有效的上传手段。因此，通过大数据平台及分析应用的建设帮助我校解决上述问题 本次建设内容： 数据治理：建立全校统一数据标准，加快校园信息化建设； 大数据平台：建立全量数据采集、管理、运维的大数据管理平台，包括对数据的 字段级管理、数据封装成为 API 接口、发布提供第三方产商进行开发使用等运维功能； 离线表格采集工具：实现离线表格在线编辑实时保存数据库功能，包括新建数据表格、表格结构修改、权限管控、数据批量上传下载、单条件搜索、多条件搜索等功能； 学生画像：打通学校学工系统、教务系统、图书馆管理系统、公寓门禁系统、一卡通消费系统、上网管理系统的数据，整合呈现学生在校多方面数据。包括：学生基本信息、奖惩情况、校内轨迹、图书借阅、选课成绩、检索条件自定义选择、完善的角色权限控制等功能； 教师画像：全面展示教师基本信息、学历单位、工作经历、党政职务、专业技术职务、一卡通消费、工资变化、教学信息、评教信息、科研信息等； 1、可参考的行业经验 目前，国内部分走在前列的学校在对大数据分析系统已经走出了探索的步伐，并取得 了一定的积极成果。试将其中的一些典型代表举例如下： 大学 大学早在 2016 年 -2017 年在学校内部已经部署大数据平台，实现统一数据管理的 功能，以将数据封装成为 API 接口的方式提供给第三方厂商使用，成为了应用开发中校方占据主导地位，开发 API 总量 185 个，总调用次数近万次。 大学部署学生画像系统，每个管理者对于学生信息的查询不再需要登录多个业务系统，同时直观的呈现学生在校行为轨迹信息，帮助管理者更加方便的了解学生。 大学 大学于 2017 年开始进行全校数据治理，由校长牵头，实现一把手工程，全校高度重视数据治理过程，目前已经接近尾声，全校建立统一数据标准，校园内部数据交换共享 效率获得极大提升，信息化建设也获得教育部高度赞扬许可。 大学 大学于 2017 年开始建设教师画像系统，业已建设完成，通过教师画像，校方可以明确了解每个教师的基本信息、学历信息、工作经历、党政职务、消费、薪资、教学、评 教、科研等详细情况，减省了大量的查询工作，有效的实现将数据可视化转变为校方提供服务。 2、技术可行性 大数据分析的相关技术发展已经成熟，主要的相关技术有： 传统数据库技术，例如 Oracle 、 MsSQl 等，我校已经使用多年，并在数字化校园、一 卡通项目中广泛采用，相关人才丰富。 大数据专用处理技术， 主要包括 Hadoop 软件体系。 其中， Hadoop 软件体系的各个功能 组件如 HDFS、MapReduce、Hive 、 HBase、Spark 、Mahout、MLlib 、Graphx 、 Stome、Flume 、 Kafka 、Yarn 、Zookeepker 都已经非常成熟， 有大量的商业公司利用上述技术开发了丰富的 产品和应用软件，在各行各业发挥作用。数据挖掘分析的开发工具也已经成熟，相关软件 丰富，包括 Python 、R、SAS、Matlab 、 Java 等。有大量的商业公司利用上述技术开发了丰 富的产品和应用软件，在各行各业发挥作用。 在数据实体的组织、处理方面，我校在之前的数字化校园建设过程中已经积累了大量 的实践经验，并形成了部分可以继承的成果，教育部也于  2012 年推出了具体的信息标准内 容。在商业领域，数据仓库技术、联机数据分析处理（  OLAP）、商业智能工具（  BI ）、辅助 决策系统已经经过多年发展走向成熟。 因此，本项目所需的各种技术要件均已经具备，市场上也有大量的有实力、有经验的 公司开展相关的业务服务，有很多案例和成果可供借鉴，因此本项目的技术可行性有充分 保障。 3、项目预算的合理性及可靠性分析 本项目的预算依据来源于项目的建设内容。 大数据平台及应用建设符合学校总体布局。 项目预算已经专家们反复论证，充分考虑了学校的用户规模、系统组成、平台性能、产品 市场报价等诸多因素。项目建成后将极大地提升学校信息化服务水平，其实用价值和社会 效益十分明显。 我们认为本项目符合国家有关政策和技术标准，并结合了我