工业大数据方案建议书_V1.0.pptVIP

工业大数据方案 技术方案 职务：技术顾问 方向：工业云平台，大数据管理，数据挖掘与机器学习。 学历：内蒙古大学硕士学位 工作履历： 曾就职于安世亚太（北京）科技有线公司，担任知识工程系统架构师，参与2010年国防科工委支持项目《基于知识面向流程的新一代飞机设计系统》，主持完成西飞国际《MA60外场监控系统》的规划与架构设计。 曾就职于广州巨杉软件开发有线公司，担任广发银行影像与历史数据管理平台架构师。 曾任职于易往研究院，担任智能工厂软件系统研究员， 主持2017年工业与信息化部电子标准化研究院创新支持项目并担任工业云计量验证系统的架构设计师。参与青岛海尔COSMO项目一期工程的实施和二期工程的前期规划。 顾问介绍 目录 1 工业大数据蓝图 3 工业大数据建模 2 工业数据湖 4 预测与优化 5 主要业务规划 大数据智能工厂规划 基于机器学习的工业大脑 预测性维修 异常监控 人机协同 过程优化 EMS数据 ERP数据 MES数据 检验数据 设备数据 传感器数据 数据源 DCS数据 工业大数据架构 大数据应用 大数据处理 工艺优化 质量提升 产线故障预测 预测性维修 效率提升 可视化监控 事务型数据 MPP数据库 HADOOP OLTP 数据仓库 元数据 索引 列存储 粗粒度索引 数据压缩 SQL优化 动态拓展 资源管理 大表关联 并行加载 半结构化 非结构构化 HDFS Map/Reduce Hive Pig 事务处理 数据完整性 锁机制 索引机制 SQL优化 SQL执行 备份恢复 断点处理 监控管理 流处理（Storm、Spark Streaming） 智能制造大数据蓝图 工艺 人员 物料 设备 质量 大数据平台 业务系统实时查询服务 批量检索服务 数据分享服务 数据下载服务 数据仓库和分析型应用 ODS/DSA – 面向主题、当前 DW – 面向主题、历史和汇总 DM DM API接口 供应链优化 作业行为优化 设备预测性维修 Spark ML 目录 1 工业大数据蓝图 3 工业大数据建模 2 工业数据湖 4 预测与优化 5 主要业务规划 6 中安鼎辉大数据平台 工业大数据特点 供应商数据 产品质量 服务信息 信用数据 位置数据 渠道依赖 原料来源 Web信息 业务信息 行为信息 机器数据 多种类型 时间序列 数据真实 数据海量 并发较高 控制数据 数据多样 时间戳 程序数据 结果数据 人员数据 基本信息 行为信息 物料数据 基本信息 计量信息 位置信息 物流信息 加工信息 装配信息 追踪信息 质量数据 检验数据 随机性 概率特征 相关性 客户数据 需求数据 产品数据 位置数据 竞争对手 信用数据 业务数据 Web信息 行为信息 物流数据 位置数据 计量数据 时间数据 多样、实时、海量的数据需要依赖大数据技术进行数据管理并产生价值 交互查询 批查询 机器学习 实时分析 设备 传感器 质量 人员 事件 ETL工具 定义的主题 查询 结果呈现 物料 元数据及关联性 数据预处理 报表展示 机器学习结果展示 数据源定义 数据预处理 工业数据湖 机器学习/数据分析 HADOOP/Spark技术 流处理 信息 基于数据湖分析 机器学习 大数据存储 SQL 数据仓库 数据湖 数据湖与价值发现 目录 1 工业大数据蓝图 3 工业大数据建模 2 工业数据湖 4 预测与优化 5 主要业务规划 工业大数据建模目标 01 02 03 04 如上图显示的机器学习算法，多级算法分析引擎可以根据对工厂已安装设备的数据采集和工艺流程，自动绘制内在的逻辑关系，并显示哪个工艺流程和数据流之间直接或间接的相互关系，以及这种关系存在的原因。这种深层和独特的分析提供了一个高等级的平台来侦测异常，通过行为和运营表现来标记质量与效率，并进行微观辩证性的根源问题分析。 生产过程建模 设备数据建模 结果的相似和关联性 产线数据建模 模型算法-DNN 神经网络是一组模拟人脑进行模式识别的算法组合，通过聚类或者标记原始数据进行数据感知，它可以识别真实世界包含在向量中的数据，如图片、声音、文本等。 深度神经网络与单层神经网络的区别是数据通过了多步模式识别的隐藏层处理，传统的神经网络机器学习算法依赖于一个输入一个输出一个隐藏的浅层神经网络学习，而深度神经网络是在一个以上的隐藏层学习。 模型与数据 实时数据处理 历史数据处理 模型分析实时数据检测设备状态、预防设备故障、优化生产过程、提升产品质量、能效增强、人机协同。 通过对历史数据清洗整合，进行模型的训练，优化模型参数，进行更加有效的生产和运营。 强化模型 目录 1 工业大数据蓝图 3 工业大数据建模 2 工业数据湖 4 预测与优化 5 主要业务规划 设备预测性维修 时间单元 对于故障警告日志进行时间单元划分，将故障或警告视为事件