数据采集处理项目技术方案.docxVIP

数据采集办理项目技术方案 数据采集办理项目技术方案 PAGE / NUMPAGES 数据采集办理项目技术方案 大数据库中心数据库投资商和公司数据采集办理项目 项目编号： I5300000000617001206 技术方案 有限公司二○一七年六月 . .. . .. 目 录 1 前言 3 项目背景 3 项目目标 3 建设原则 3 参照规范 4 名词解说 5 2 云数据采集中心 6 需求概括 6 整体设计 6 核心技术及功能 9 3 大数据计算平台 31 需求概括 31 整体设计 31 数据模型设计 32 4 数据营运 35 数据发掘剖析 35 数据剖析办理的主要工作 35 数据剖析团队组织和管理 36 5 安全设计 39 6 风险剖析 43 7 部署方案 44 8 实行计划 45 9 技术规格偏离表 46 10 售后服务承诺 49 11 对于运行保护的承诺 . 52 12 保密举措及承诺 53 13 培训计划 55 学习参照 . .. . .. 前言 项目背景 大数据中心建设出发点考虑从投资者角度涵盖招商全流程，尽可能为投资者解决项目实行过程中的困难和问题，便于招商部门正确掌握全省招商数据，达到全省招商项目数据共享，形成全省招商工作“一盘棋、一张网、一体化”格局。大数据中心将充足 发挥大数据优势，增强对公司投资项目、投资轨迹剖析，评估出其到 XX 投资的可行性，为招商过程留下印迹、找到规律、明辨方向、供给“粮食”、提高效率，实现数据寻 商、数据引商、数据助商，实现数据资源及时共享、集中管理、随时查问，实现项目可统计、可看管、可协调、可管理、可配对、可追踪、可查核。 本次数据营运服务主若是为大数据平台拟订数据营运规范及管理方法 ，同时为“企 业数据库”供给数据采集、储存与剖析服务，并依据营运规范要求连续展开数据营运服务。 项目目标 拟订招商大数据营运规范及管理方法。 拟订招商大数据有关元数据标准，达成有关数据的采集、整理与储存。 依据业务需求，研发招商大数据招商业务剖析模型，并投入应用。 依据营运规范及管理方法的要求连续展开数据营运工作。 建设原则 鉴于本项目的建设要求，本项目将依照以下建设原则： 学习参照 . .. . .. 前瞻性和高标准 整个项目要依照公司对大数据应用的需要的高要乞降高标准建设，参照行业标杆应用，成立知足需求，面向将来的目标，整个项目拥有必定前瞻性。 经济性和适用性 整个项目以现有需求为基础，充足考虑将来发展的需要来确立系统的架构，既要降低系统的早期投入，又能知足服务对象的需求，同时系统设计应充足考虑对已有投资的保护，对已成立的数据中心、基础平台、应用软件应供给齐备的整合方案。 先进性和成熟性 为了保证项目拥有较长的生命周期，应充足考虑到管理创新、技术发展需要，依照先进的建设理念，选择先进的技术架构和成熟技术，知足业务需求。 高性能和安全性 规范地进行系统建设和开发，供给合理且经济有效的应急方案，保证系 统的稳固，向各种服务对象供给靠谱的服务。拥有安全性，在系统受到攻击或崩溃时能快速恢复，保证重要数据的机密性和完好性。 参照规范 GB/T 20269-2006 信息安全技术—信息系统安全管理要求 GB/T 20984-2007 信息安全技术—信息安全风险评估规范 GB/T 22239-2008 信息安全技术—信息系统安全等级保护基本要求 GB/T 22240-2008 信息安全技术—信息系统安全等级保护定级指南 GA/T 388-2002B 计算机信息系统安全等级保护管理要求 GB/T 8567 -1988 计算机软件产品开发文件编制指 GB/T 11457-1995 软件工程术语 GB/T 11457-2006 信息技术 软件工程术语 学习参照 . .. . .. 软件工程 产质量量 第 1 部分 : 质量模型 软件工程 产质量量 第 2 部分 : 外面胸怀 软件工程 产质量量 第 3 部分 : 内部胸怀 软件工程 产质量量 第 4 部分 : 使用质量的胸怀 GB/T 14394-2008 计算机软件靠谱性和可保护性管理 GB/T 17544-1998 信息技术 软件包 质量要乞降测试 名词解说 S2DFS：简单储存散布式文件系统 （ Simple Storage Distributed File System ） D2B:散布式数据库（ Distributed Database ） JSS：作业调动服务（ Job Scheduler Service ） DCS：数据计算服务（ Data Computer Service ） MPS：信息办理服务（ Message Proce