ES近实时数据写入流程与原理：路由机制及处理.pdfVIP

《058_ES的近实时数据写入流程和原理（3）》

路由机制，写入数据的模型是一个个的文档，面向文档的数据结构，文档中包含许多字段，

这些字段的类型与索引的映射匹配。文档写入索引后，才能按照映射进行数据处理、分词

和。

_

每个文档都应该有一个ID，可以自动生成，也可以手动指定。根据一定的路由算法或，

将文档路由到一个分片上。

每个分片都是一个完整的数据切片，底层基于Lucene全文检索框架实现。最初，数据

直接进入分片的内存中。

MySQL，只要写入成功，立即就可以查询到。

ES，每个分片每隔1秒会执行一次刷新操作，将内存缓冲区中的数据写入Lucene的一个

段（文件段）中，此时段文件进入操作系统缓存。刷新操作就是完成这一过程的。

《058_ES的近实时数据写入流程和原理（3）》

路由机制，写入数据的模型是一个一个的document，面向文档的数据结构，document里

包含很多个字段，这个字段的类型都跟index的mapping是匹配上的，document写入index

里才可以按照mapping来进行数据处理、分词和

每个document应该都得有一个_id，可以是自动生成，也可以是手动指定的，根据一定的路

由算法，，把这个document路由到一个shard