分布式系统中ES集群及其他组件高可用与分片机制探讨.pdfVIP

《015_再探ES集群的副本以及高可用机制（5）》

分布式微的项目，里面大量采用了ES的集群架构的思想，划分了节点的类型，

master候选节点，纯data数据节点，一般来说，无论多大规模的集群，其实master候选节

点给他分配3台就足够了

逻辑上的一个数据集合

分布式微：你的每个分片里的是服务的数据！支持的是服务数据的读和写，以

及微服务相关的功能；ES，每个分片里的是索引数据，底层都是基于lucene去对数据

建立倒排索引，每个分片支持的是索引的搜索和管理；mq、kafka，每个分片里

的都是你的消息数据，支持的是消息的写入和消费

hbase，也分片，的是kv数据，支持的是kv数据的读和写

hdfs，分片，的是文件数据，支持的是文件的读和写

clickhouse，数据分片，也有副本，高可用，的是用于分析的数据，可能是明细也可能

是自动聚合后的，依托这些数据以及自动建立的索引和一套机制，可以数据的分析的功

能

上面的这些东西都是分布式的一些数据，数据都是分片的，分片都是有副本的，都是支

持高可用机制、可伸缩机制，只不过的是