01-基于 Apache Doris 构建多场景数据分析应用.pptx

分享标题分享人姓名+title基于ApacheDoris构建多场景数据分析应用

目录ApacheDoris简介ApacheDoris特性应用场景与案例

ApacheDoris简介

ApacheDoris项目发展历史2018-2021Palo开源，并成为Apache基金会孵化器项目，更名为ApacheDorisApacheDoris被数百家企业应用在生产系统，包含美团、京东、小米、字节、华为、腾讯等公司2022-至今2022年1月，Doris团队创建飞轮科技（SELECTDB），大力建设开源社区并提供商业化产品和服务支持2022年6月，孵化毕业，成为Apache顶级项目（TLP）4000多家各行各业中大企业使用，11000star，600+多开发者，是目前最活跃、最受欢迎的开源大数据项目2013-2017百度研发实时数仓平台Palo，采用列存和MPP查询引擎，最初应用在百度统计、广告报表分析场景推广到百度所有业务线，正式成为百度统一的实时数仓

ApacheDoris是当前全球最活跃的大数据项目累计贡献者月度活跃贡献者累计贡献者超过600+人，同比新增贡献者超过120%，并仍处于持续上升的态势。在全球大数据开源项目排行中活跃贡献者数连续10个月位列Top1，已超越Spark最活跃时期600+Top1

丰富的生态系统和BI、数据集成、应用系统无缝集成运行在多种体系结构被主流云厂商集成托管

飞轮科技（SelectDB）是ApacheDoris的商业化公司开源+商业双轮驱动服务用户、客户、开发者大力将开源ApacheDoris发扬光大，并基于ApacheDoris推出商业产品，实现开源和商业的良性增长飞轮2022年1月由ApacheDoris创始团队和百度智能云创始团队创立，总部位于北京，并在西安、成都、深圳、广州、杭州、上海、新加坡、美国硅谷设有研发中心和分公司，公司目前近200人连续完成3轮融资，累计融资额近10亿，投资方为红杉中国、IDG资本中国等头部VC

飞轮科技（SelectDB）是ApacheDoris重要推动力量一个月的Top15贡献者，12名在飞轮科技飞轮科技主导了众多关键功能7名PMC成员，20名Committor主导发布了ApacheDorisV1.0V1.1V1.2V2.0V2.1等一系列版本ApacheDoris社区用户群95%的问题由飞轮科技同学响应最近一年半，ApacheDoris90%的新增代码由飞轮科技同学贡献产品方向主要贡献者盲测性能数倍提升飞轮科技多租户资源管理飞轮科技，百度MemoryTracker飞轮科技倒排索引飞轮科技新一代优化器飞轮科技，美团PipeLine执行飞轮科技，美团数据湖加速飞轮科技，字节，360数科跨集群复制飞轮科技存算分离飞轮科技

ApacheDoris被行业广为认可中国科学技术协会ApacheDoris评为2021科创中国开源创新榜年度优秀开源产品中国信息通信研究院ApacheDoris评为尖峰开源项目及开源社区产品经过了信通院可信数据库认证和优秀案例星河奖中关村高新技术企业，数十项专利和软著安全与信创公安部等保三级，6项ISO安全管理体系认证2022信创产业实干者，十多项国产化信创兼容认证

ApacheDoris特性

ApacheDoris在数据分析流中的定位

ApacheDoris产品架构服务高可用，数据高可靠Frontend节点负责管理元数据、节点、生成查询计划Backend节点负责存储数据、执行查询数据在Backend默认三副本存储，自动副本补齐和均衡MPP架构，所有节点都可以横向扩展支持不停服滚动升级、扩缩容兼容MySQL协议，MySQLClient可以通过负载均衡链接Frontend节点

ApacheDoris主要特性极速的分析性能高效的数据更新多租户管理高可用与高可靠易用易管理半结构化数据分析实时的数据导入湖仓一体高效简单统一高并发点查询

极速的分析性能-Benchmark测试环境和结论3台16core,64GB云主机测试，SF100多表关联复杂查询场景2.0版本性能相比0.15版本提升13倍，相比其他的MPP数据库有明显优势单表场景2.0版本性能相比0.15版本提升10倍，相比擅长单表的CK有优势

极速的分析性能-技术核心引擎CBO优化器基于代价的joinreorder，pushdown，RF选择高并发点查的短路径优化自动收集统计信息和丰富的