集团企业数据中台解决方案.ppt

32 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI Station：硬件统一管理，框架一键部署。 GPU资源分配 硬件性能可视化 机器学习环境一键部署 集群资源监控 实时性能分析 算法分析 33 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI标注：通过标注平台可以对文本、图像、知识进行标注，并且对标注质量进行自动、人工审核，保证数据质量 标注质检 智能处理 自动质检 人工质检 协同众包 任务分派 权限管理 版本管理 分包质检 …… 知识标注 实体标注 事件标注 属性标注 关系标注 …… 视频标注 候选物标注 跟踪标注 视频分割 视频审核 多形状选择 …… 图片标注 分类标注 标框标注 区域标注 描点标注 …… 文本标注 词典编辑 语料处理 语料基线 分词词性 分类标注 关键词标注 …… 数据源 TXT WORD 图片 网页 34 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI标注：通过标注平台可以对文本、图像、知识进行标注，并且对标注质量进行自动、人工审核，保证数据质量 全流程数据标注 客户提交原始数据和需求描述，第一时间定制开发标 注工具并实施数据标注，标注结果经质检人员核验后 进行交付 数据隔离方案 将数据资源调用、标注前端模块部署至内网环境，严 密的数据访问策略保证数据安全。平台把控项目进度， 保障数据标注质量 私有化部署 为客户本地化部署具有自己的兼具需求管理、自主创 建标注工具、标注任务管理、人员管理、众包管理等 功能的数据标注平台 可为特殊需求免费定制化设计医用模板 平台完成全流程，用户无需分担经历 数据不出用户环境,，保证数据安全 标注项目全程面管理 标注平台免开发 可自主运营和管理项目人员 35 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI标注：通过标注平台可以对文本、图像、知识进行标注，并且对标注质量进行自动、人工审核，保证数据质量 词典创建/管理 语料管理 预处理/打基线 任务众包/审核 知识实体标注 关联标注 36 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI训练：旨在降低机器学习使用门槛，提供可视化的操作界面实现模型的训练、评估和预测过程，无缝衔接数据分析和预测应用，降低机器学习模 型的生命周期管理难度，为用户的数据挖掘分析业务提供易用、高效、高性能的平台服务 工作台UI 服务/模型管理 模型发布 模型分享 模型存储 服务管理 训练流程设计 可视化编排 流程解析引擎 AutoML NoteBook 会话 任务监控 模型服务 数据集管理 数据导入 数据预览 TensorFlow TensorFlow 算法组件库 TensorFlow TensorFlow TensorFlow TensorFlow caffe2 MXNet 计算框架 SK-Learn MLib …… 37 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI训练：是强大且便捷的机器学习和深度学习建模平台，同时提供模型生产化能力，平台的开放性也可以让用户更容易扩展算法、迁移模型并与既 有IT框架集成。 异构多引擎融合架构 R、Spark、Python等 Docker、Hadoop、GPU 数据抽象、混合编排 深度学习支持 与TensorFlow、caffe2等框架无缝结合 大规模分布式深度学习框架 神经网络可视化编程 Docker微服务Devops 将AI模型融合现有微服务环境运行 服务的负载均衡与高可用 完整的监控告警体系 开箱即用”白盒”算法库 内置200多种算法模型 机器学习、深度学习 可以查看、修改、升级、编写自己的算法模型 拖拽建模AutoMLJupyter 面向不同开发层级的建模工具 支持图形化、拖拽式工程建模 支持自动模型选择、自动超参数优化、自动模 型评估、模型定期优化、自动更新 包含特征工程的模型输出 调用API无需考虑特征工程复杂性 直接输入业务字段 38 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI训练：是强大且便捷的机器学习和深度学习建模平台，同时提供模型生产化能力，平台的开放性也可以让用户更容易扩展算法、迁移模型并与既 有IT框架集成。 数据管理 特征工程 可视化建模 AutoML 模型评估 应用上线 39 数据中台能力介绍 2.3、数据挖掘能力 ▉ AI开放服务：对具有通用性的模型进行能力封装，对外以API、核心模型的方式直接提供服务 AI核心模型 关系识别模型 位置定位模型 业务量预测模型 NPS评估模型 …… 智能服务 智能搜索 数据可视化 智能问答 知识图谱 本体建模 实体抽取 数据导入 事件抽取 知识建模与存储