【大厂案例】浪潮数据中台解决方案（49页 PPT）.pptxVIP

浪潮数据中台解决方案

;

二、数据中台解决方案

三、数据中台实践汇报;

数据中台的概念由巴巴首次提出，它是一个承接技术、引领业务、

构建规范定义的、全域可连接萃取的、智慧的数据处理平台，建设目标是为了高效满足前台数据分析和应用的需求。

全域数据采集与引入：以需求为驱动，以数据多样性的全域思想为指导，采集与引入全业务、多终端、多形态的数据；

标准规范数据架构与研发：统一基础层、公共中间层、百花齐放应用层的数据分层架构模式，通过数据指标结构化规范化的方式实现指标口径统一；

连接与深度萃取数据价值：形成以业务核心对象为中心的连接和标签体系，深度萃取数据价值；

统一数据资产管理：构建元数据中心，通过资产分析、应用、优化、运营四方面对看清数据资产、降低数据管理成本、追踪数据价值。

统一主题式服务：通过构建服务元数据中心和数据服务查询引擎，面向业务统一数据出口与数据查询逻辑，屏蔽多数据源与多物理表;

数据中台本身还是围绕向上层应用提供数据服务构建的。中台建设肯定会涉及上面提到的管理层面（组织、流程、考核）、

平台层面（开发、服务、治理、运营）、数据层面（资产的类别、清单、质量、运维）、功能层面（数据的实时加工、批量加工、数据展现、数据搜索、数据存储）。;;

数据运营阶段;

二、数据中台解决方案;

内、外部

开发者

业务用户

API开放集成;;;

MICROSERVICESARCHITECTURE;

支持在线建立模型、模型变更、下

线等操作，支持批量模型导入

（Excel、PDM）

支持Hadoop（hive、spark、

Impala）、MPP（vertica、gp、

gbase、IQ）、RDB（Oracle、

MySQL）等;;;

④模型数

据标准

⑥指标数据标准

②分词、字段库标准;;;

▉数据质量管控：从网管数据的生产环境、采集、处理、消费全过程进行质量监控与保障;

19数据中台能力介绍2.1、数据中台-数据可视能力

▉数据可视：OLAP多维透视分析，构建灵活、直观、快速的数据可视化能力;;;

?统一认证鉴权：提供统一的认证

鉴权功能

?平台功能访问控制：提供对平台

各项功能的访问控制

?敏感数据访问：支持对敏感数据

的金库模式访问控制;;

首页

提供一站式的搜素及最新的数据、服务动态情况

数据目录

提供当前系统内已具备的数据目录情况，提供分领域、专题的数据目录导航

指标目录

提供当前系统内已具备的指标情况，提供分业务、数据源的指标目录导航;

u支持多种维度的数据分类检索

u支持一键式的数据资源查询

u支持对数据资源的评价打分

u支持数据资源详情查看;

uAPI服务列表

uAPI服务详情

u在线测试

u在线申请;;;;;

?系统性能分析及瓶颈优化

?深度学习框架镜像优化

?GPU配额策略：负载均衡，公平共享

?优化多机多卡并行，优化框架

?优化数据读取流程，及数据缓存

?优化GPU分配策略，独享/共享;

32数据中台能力介绍2.3、数据挖掘能力

▉AIStation：硬件统一管理，框架一键部署。

GPU资源分配硬件性能可视化机器学习环境一键部署;

协同众包;

数据隔离方案

将数据资源调用、标注前端模块部署至内网环境，严密的数据访问策略保证数据安全。平台把控项目进度，保障数据标注质量;

▉AI标注：通过标注平台可以对文本、图像、知识进行标注，并且对标注质量进行自动、人工审核，保证数据质量;

工作台UI;;

▉AI训练：是强大且便捷的机器学习和深度学习建模平台，同时提供模型生产化能力，平台的开放性也可以让用户更容易扩展算法、迁移模型并与既

有IT框架集成。;;;;;;

▉智能问答：以智能化、模块化、开放性为目标，为交互、决策、引流等提供知识库在线构建工具和在线问答工具支撑，完成不同业务流程的专属对

话定制，帮助各行业领域快速组建智能问答