【源代码教育分享】云时代的搜索利器-ElasticSearch.docVIP

现在的我们，处于一个大数据时代。在茫茫的数据海洋中，洞察数据信息的走向，对目前企业的决策起着至关重要的作用。 前面我们在课程中，开设了全文检索Lucene框架的学习，很轻松的在一天左右时间上手了这个框架，模拟了类似谷歌、度娘的面向互联网的垂直检索。其实，在Lucene之上，还有很多更强大、更适合企业实战场景的全文检索框架，如Apache Nutch、Solr、ElasticSearch等等。今天，我们就来用用ElasticSearch！！ ElasticSearch（以下简称ES）是一个基于Apache Lucene，开源的分布式搜索引擎，具备高可靠、易扩展性。同时他也支持Rest风格的数据交互，相当轻量，耦合性低。目前实践在很多企业级应用，如WIKI百科、UBER、ebay、WordPress等都用他来完成检索平台的搭建。官网地址为https://www.elastic.co/ 学习ES我们分为4步： 配置ES服务器 安装HEAD插件 添加数据 查询数据 配置ES服务器--核心 1、从官网下载到本地，解压： 2、进入bin目录，修改elasticsearch.in.bat（大小为最大物理内存的一半，最大最小一致）： 3、进入config目录，修改配置elasticsearch.yml： 在命令行下，运行bin目录下elasticsearch.bat，启动服务： 安装HEAD插件 -- 集群服务器的可视化界面 安装head插件--一个可视化的集群服务器插件 安装成功后，在官方根目录的plugin目录下，下载head的资源文件： 但由于直接下载的head插件，对2.0后el支持不佳，固需要再打一个补丁，在Github上获取ES2-support分支，地址如下： /philipskokoh/elasticsearch-head/tree/ES2-support 解压后，覆盖head插件目录！！ 查看head查看，在页面输入地址 http://localhost:9200/_plugin/head/， 结果如下： 添加数据--直接从数据库来（要玩就玩大的！！） Windows PowerShell数据同步方案安装 先下载elasticsearch-jdbc插件 地址如下：/repository/org/xbib/elasticsearch/importer/elasticsearch-jdbc/ 用最新版 解压后，放到el根目录的app文件夹下（虽然大部分资源都放在plugin，但是2.0版本放在plugin下，服务无法启动!!）： 在bin目录下，创建一个PS目录，添加两个文件： 新建一个文件，取名为jdbc_mysql.ps1： 内容如下： function Get-PSVersion { if (test-path variable:psversiontable) { $psversiontable.psversion } else { [version] } } $powershell = Get-PSVersion if($powershell.Major -le 2 ){ Write-Error Oh, so sorry, this script requires Powershell 3 (due to convertto-json) exit } if((Test-Path env:\JAVA_HOME) -eq $false){ Write-Error Environment variable JAVA_HOME must be set to your java home exit } $DIR = C:\Sirius\devPlatform\elasticsearch\elasticsearch-2.0.0\app\elasticsearch-jdbc- $FEEDER_CLASSPATH=$DIR\lib $FEEDER_LOGGER=file://$DIR\bin\log4j2.xml java -cp $FEEDER_CLASSPATH\* -Dlog4j.configurationFile=$FEEDER_LOGGER org.xbib.tools.Runner org.xbib.tools.JDBCImporter jdbc_mysql.json 创建一个文件，取名为jdbc_mysql.json： 内容如下： { type:jdbc, jdbc:{ url:jdbc:mysql://localhost:3307/bigdata, user:root, password:ad