ELKF搭建详细步骤.docxVIP

ELKF 搭建完整步骤 目录 1.1 流 程 说 明 ..........................................................................2 1.2 安 装 .................................................................................2 1.2.1 Server 端 安 装 . ...........................................................2 1.2.2 client 端 安 装 ...........................................................10 1.3 日 志 格 式 调 整 及 其 他 问 题 ...............................................14 1 / 21 1.1 流程说明 日志流向：Client_data---filebeat-?redis- ?logstash---?elasticsearch--- ?kibana client 通过 filebeat 或者 logstash 收集日志，发送到 redis 缓存，redis 输出到 logstash，通过 logstash 做一些过滤和修改之后传送到 es 数据库，kibana 读取 es 数据库做分析 1.2 安装 1.2.1 Server 端安装 Jdk1.8 Elasticsearch elasticsearch-head nodejs Logstash Redis Kibana 下载地址： https://www.elastic.co/downloads 2 / 21 新版 filebeat logstash 有不少变化，网络文章很多配置并不太适用 请参考官方文档： https://www.elastic.co/guide/index.html 所有组件安装目录/app/elk Server ip:28 1.jdk1.8 安装（略） 2.Elasticsearch 安装： 新建用户 elk，es 需要非 root 用户启动 Wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch- 6.1.0.tar.gz tar zxvf elasticsearch-6.1.0.tar.gz cd elasticsearch-6.1.0/config jvm.options 配置文件，适当调增 jvm 运行参数 elasticsearch.yml 主配置（此处使用了单机模式） 3 / 21 修改： 在末尾增加，是 es-head 能远程访问 es 库： 启动服务： Su – elk /app/elk/elasticsearch-6.1.0/bin/elasticsearch 3. elasticsearch-head 安装，用于 web 界面查看和编排 es 数据库 4 / 21 先安装 nodejs，经测试，在系统上 yum 安装的 nodejs 使用会报错，版本不符 wget /mirrors/node/latest-v4.x/node-v4.4.7-linux- x64.tar.gz tar zxvf node-v4.4.7-linux-x64.tar.gz cd node-v4.4.7-linux-x64 设置环境变量； export NODE_HOME=/app/elk/node-v4.4.7-linux-x64 export PATH=$PATH:$NODE_HOME/bin export NODE_PATH=$NODE_HOME/lib/node_modules 执行 source /etc/profile grunt 是基于 Node.js 的项目构建工具，可以进行打包压缩、测试、执行等等的工作， head 插件就是通过 grunt 启动 wget /mobz/elasticsearch-head/archive/master.zip unzip master.zip cd elasticsearch-head-master/ npm install -g grunt-cli 5 / 21 检查是否安装成功： grunt -version 修改 head 插件源码： vim Gruntfile.j