某著名企业;数据资产
?兼收并蓄各类数据来源,丰富数据资产,实现优
势互补,打通数据流向。;统一资讯数据模型与标准;第三代;采集和融合各种渠道和形;数据源支持广泛;高可用
分布式集群架构;?数据的批\流处理能力
?具备实时窗口统计能力;Apache
?Mesos
?ElasticJob;;集群资源弹性扩容;多分片高并发模式;1、CDC服务监听数据源变动;?资讯数据除了新增,还有大量更新和删除操
作
?同一一条记录的多次变动,处理过
程要保持顺序。
?多次执行,结果冥等(多次执行结果一致);ETL业务逻辑的图形化设计工具;?1000万条数据初始化完成清洗转换
原创力文档

文档评论(0)