TDH大数据平台培训_第15讲.分布式全文搜索引擎Search.pdfVIP

分布式全文搜索引擎Search 星环科技 www.transwarp.io 2018年5月10 日 星 环 科 技 星 环 科 技 1 Search介绍 2 Search架构 目 录 CONTENTS 3 Search安装与配置 4 Search使用 星 环 科 技 星 环 科 技 1 chapter Search介绍 星 环 科 技 星 环 科 技 Search介绍 Transwarp Search基于开源的Elasticsearch进行开发 ，在其基础架构的基础上进行了多种功能优化 ， 并通过Esdrive实现了SQL交互方式 • 具有如下特点 ： − 分布式的实时文档存储 ，每个字段可以被索引与搜索 − 分布式实时分析搜索引擎 − 能胜任上百个服务节点的扩展 ，并支持PB级别的结构化或者半结构化数据 − 可以通过Inceptor使用SQL语言的方式 ，创建索引和执行全文搜索。 单击此处编辑母版标题样式 • 在T DH平台中 ，Transwarp Search扮演两个角色 ： − 作为Transwarp Hyperbase全文索引的底层实现。 − 作为一个单独的服务 ，它既是分布式文件存储 （Distributed Document Store ）。也是强大的搜索引 擎。 • 应用场景 ：海量数据的存储和搜索、检索分析、日志分析等。 星 环 科 技 2 chapter Search架构 星 环 科 技 星 环 科 技 Search-架构 Transwarp Inceptor SQL Engine Search-drive API server SQL引擎和搜索引擎融合 SQL 2003和全文检索SQL扩展 内存管理 存储管理 搜索引擎 聚合计算 可扩展性 - PB级别 Lucene索引 单击此处编辑母版标题样式 高性能检索和分析 支持SSD加速的混合存储模型 支持堆外的内存管理技术 星 环 科 技 Search数据模型 Transwarp Search中数据对象与传统二维表的映射关系如下： Transwarp Search