数据流引擎-汇总分享.pptVIP

PPT模板下载：行业PPT模板： 节日PPT模板：素材下载： PPT背景图片：图表下载： 优秀PPT下载：教程： Word教程： 教程： 资料下载：课件下载： 范文下载：试卷下载： 教案下载： 字体下载： IOT 分享201809 数据流引擎 数据流引擎-NIFI 成熟的开源ETL工具，提供自定义二次开发java组件导入，也可以通过 Python、Javascript 、R甚至Apache Spark等语言做系统内逻辑处理；对于不同的数据格式，需要不同类型的Processor来处理；支持集群部署，可稳定持续处理连续大数据，数据跟踪服务可记录所有传输历史内容；可在线调整流程且保证数据不丢失；没有每个记录级别的统计信息的实时监控/调试功能，单纯的数据流引擎，无其他附加辅助功能。 数据流引擎- StreamSets Data Collector 成熟的开源ETL工具， StreamSets中数据是有结构的，相比之下Nifi的Processor、Controller Server架构设计的更简洁、更容易理解，StreamSets稍微复杂一些，但是使用起来也挺方便； Sexy UI； ? One nice thing about?Streamsets is that it can process binary data .Some sources, such as Kafka Consumer, can read messages from the Kafka topic and pass them to other processors or external systems without parsing the structure of the binary message into the record format. This allows us to forward the efficient data to some other destination with minimum overhead；有图表统计功能。 数据流引擎- Mule Mule Esb是一个基于Java的轻量级企业服务总线和集成平台，提供数据流引擎，在ide中提供可视化拖拽编辑，有丰富的组件(包括kafka),社区版（免费版）无web端相关辅助功能，需二次开发。（ Mule可以集成到springboot中） 数据流引擎- Airflow airflow 是一个编排、调度和监控workflow的平台，由Airbnb开源，现在在Apache Software Foundation 孵化。airflow 将workflow编排为tasks组成的DAGs，调度器在一组workers上按照指定的依赖关系执行tasks。同时，airflow 提供了丰富的命令行工具和简单易用的用户界面以便用户查看和操作，并且airflow提供了监控和报警系统。 THANK YOU THE POWERPOINT TEMPLATE Cloud-Admin是国内首个基于`Spring Cloud`微`服务`化`开发平台`，具有统一授权、认证后台管理系统，其中包含具备用户管理、资源权限管理、网关API管理等多个模块，支持多业务系统并行开发，可以作为后端服务的开发脚手架。代码简洁，架构清晰，适合学习和直接项目中使用。核心技术采用`Spring Boot2`以及`Spring Cloud (Finchley.M8)`相关核心组件，前端采用`vue-element-admin`组件。 * OAuth2.0 授权框架 JWT 认证协议 RBAC（Role-Based Access Control，基于角色的访问控制） Zuul 网关，服务路由、均衡负载功、权限控制（过滤器） Eureka 服务注册中心 Feign、Ribbon 实现服务的消费、负载均衡客户端，可以很好的控制http和tcp的一些行为。Feign默认集成了ribbon。 Hystrix 熔断器、断路器(聚合监控等) Hystrix Dashboard实时查看接口的运行状态和调用频率 Sleuth 在分布式系统中提供追踪解决方案，并且兼容支持了zipkin Config 应用多环境的外部化配置以及版本管理 * OAuth2.0 授权框架 JWT 认证协议 RBAC（Role-Based Access Control，基于角色的访问控制） Zuul 网关，服务路由、均衡负载功、权限控制（过滤器） Eureka 服务注册中心 Feign、Ribbon 实现服务的消费、负载均衡客户端，可以很好的控制http和tcp的一些行为。Feign默认集成了ribb