Vantiq使用案例-电网.docxVIP

Vantiq使用案例 电力行业泛在物联网中的应用 System2System3System4System5Kafka省电力 System2 System3 System4 System5 Kafka 省电力IT现状：业务系统痛点 ? 各个业务系统的标准化程度低，有很多跨多个系统的业务流程。 ? 虽然使用ESB做各业务系统之间的集成，但是基于SOA架构的ESB使用不便， 对所集成的系统所使用的技术、实现的接口都有限制，而现状是，集成时所需的 业务系统的接口都没有提供。 ? 也有使用Kafka或MQ实现事件驱动的服务集成，但是改造成本太高。 System1 ESB ESB System1System2共享数据平台SharedDB2电力行业IT现状：数据痛点 System1 System2 共享数据平台 Shared DB2 电力行业IT现状：数据痛点 ? 各系统之间有大量需要共享的数据， 目前大量使用各种数据同步方案，将数据同 步到共享数据平台来使用。为了保证这个同步的过程，就催生了很多数据治理的 需求。 System3 源数据平台 源数据平台 DB3 DB2 DB1 通过ETL定时同步 源数据库访问 共享数据库访问 设备设备设备DB2电力行业IT现状：物联网相关业务 设备 设备 设备 DB2 电力行业IT现状：物联网相关业务 . 原先的物联网业务由各个独立的系统实现，甚至数据的采集和使用由不同的系统 实现，并且，数据采集系统由设备部开发维护，供服系统是另一个部门。 供服系统智能终端采集系统. 两个系统之间的数据通过同步来实现 共享，如果使用ESB来集成这两个系 统，例如，ESB从采集系统将数据取 出来实时发到供服系统，两个系统都 供服系统 智能终端 采集系统 需要改造，这又牵扯两个部门。 Shared Shared DB2 ETL ETL DB1 DB1 省电力 省电力IT现状：原因分析 . 现有的大部分的数据共享、数据同步业务，都是由于服务集成的需要而产生的。 . 但是现在的数据共享、同步方案，都是定时、批处理的方式，无法实时。 . 需要一个比ESB更加敏捷、易用、灵活、实时的服务集成方案。 . 需要一个实时数据处理、实时业务集成的平台。 . 需要满足国网泛在物联网架构规划的需求，既要能解决现在的问题，又能满足将 来的需要。 分析平台BIHANA数据集成数据分发服务集成服务分发Vantiq智能终端设备设备设备设备物联网平台智能终端大数据平台KafkaSparkHadoopHBase其他...电力行业：泛在物联网平台规划 分析平台 BI HANA 数据 集成 数据 分发 服务 集成 服务 分发 Vantiq 智能终端 设 备 设 备 设 备 设 备 物联网平台 智能终端 大数据平台 Kafka Spark Hadoop HBase 其他... 电力行业：泛在物联网平台规划 业务前台 BI BI HANA HANA HANA HANA API API网关 共享 共享 微服务 共享 共享 微服务 共享 共享 微服务 共享 共享 微服务 统一数据访问层 统一数据访问层 数据平台 数据库 数据库 分析 分析 数据库 数据 数据 仓库 数据库分析 数据库数据仓库数据平台大数据平台KafkaSparkHadoopHBase其他...数据集成与分发 数据库 分析 数据库 数据 仓库 数据平台 大数据平台 Kafka Spark Hadoop HBase 其他... 数据集成与分发 ? 数据集成的目的，是业务的实时集成。 Vantiq 数据 数据 集成 数据 数据 分发 服务 服务 集成 服务 服务 分发 物联网平台 智能终端 智能终端 智能终端 智能终端 设 设 备 设 设 备 设 设 备 设 设 备 数据集成与分发 数据集成与分发 ? 从源端接收数据，分发到目标数据源 ? 数据源：数据库，使用R7(华为), OGG, JDBC-Connector(Vantiq), DataBridge(数梦) ? 数据源：大数据平台，使用大数据平台的接口 ? 数据源：物联网数据，使用物联网平台的接口 ? 目标数据源：分析型数据库、大数据平台、业务系统等 数据分析引擎 数据分析引擎 ? 目的是将一部分数据分析的过程改成实时分析。 ? 以数据库、物联网数据为数据源 ? 以大数据平台作为作为算子 ? 以Vantiq作为业务规则引擎 ? 将计算后的数据结果发送到分析数据库或大数据平台 ? VANTIQ相比较于大数据平台的实时计算框架如SparkStream ，Flink 等，使用起来简单、灵活。 分析平台BIHANAVantiq数据集成服务分发服务集成数据分发服务集成与编排 分析平台 BI HANA Vantiq 数据 集成 服务 分