日志分析ELK平台搭建
当服务器数量以及应用达到一定的数量后，操作系统日志以及应用软件日志数量庞大，遇到问题时日志是第一手资料。平时用的sed、grep、awk已经难以满足我们的需求。随着互联网技术的发展，好多大型互联网公司研发了不同的日志分析产品，例如开源的Graylog、ELK还有Splunk等，同时Splunk也是一个商业产品，功能很强大，但是在目前的互联网领域里ELK的使用应该是更广泛。接下来会根据官网资料搭建ELK平台。环境介绍：
[*] 操作系统CentOS 7.4
[*] Java版本：openjdk 1.8.0_151
[*] 安装方式：yum安装
一、安装Elasticsearch
配置yum源
1、下载并安装公共签名密钥
rpm --importhttps://artifacts.elastic.co/GPG-KEY-elasticsearch
2、配置Elasticsearch安装包yum源
编辑 /etc/yum.repos.d/elasticsearch.repo
name=Elasticsearch repository for 5.x packages
baseurl=https://artifacts.elastic.co/packages/5.x/yum
gpgcheck=1
gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch
enabled=1
autorefresh=1
type=rpm-md
3、安装命令
yum install-y elasticsearch
4、等待安装完成后将服务启动，并做好服务自启动、防火墙等设置
# systemctl enableelasticsearch
Created symlink from /etc/systemd/system/multi-user.target.wants/elasticsearch.service to /usr/lib/systemd/system/elasticsearch.service.
# systemctl restartelasticsearch
5、检查监听端口以及相关服务
# netstat -nltup|grep9200
tcp6 0 0 127.0.0.1:9200 :::* LISTEN 13315/java
tcp6 0 0 ::1:9200 :::* LISTEN 13315/java
使用curl访问9200端口
# curl http://127.0.0.1:9200
{
"name" : "wEPnzRm",
"cluster_name" : "elasticsearch",
"cluster_uuid" : "dKeJNq1xSiizdAomMleZbg",
"version" : {
"number" : "5.6.3",
"build_hash" : "1a2f265",
"build_date" : "2017-10-06T20:33:39.012Z",
"build_snapshot" : false,
"lucene_version" : "6.6.1"
},
"tagline" : "You Know, for Search"
经检查elasticsearch 服务运行正常 二、安装Kibana
1、配置Kibana的yum源
编辑/etc/yum.repos.d/kibana-5.x
name=Kibana repository for 5.x packages
baseurl=https://artifacts.elastic.co/packages/5.x/yum
gpgcheck=1
gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch
enabled=1
autorefresh=1
type=rpm-md
2、安装kibana
yuminstall-ykibana
3、启动服务
servicerestartkibana
服务开机自启动
chkconfig --add kibana
4、检查监听端口和服务运行
# netstat-nltup
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address Foreign Address State PID/Program name
tcp 0 0 10.1.4.182:5601 0.0.0.0:* LISTEN
服务默认的端口为5601 默认配置文件的监听主机为localhost 只能本机访问，为了方便，将其改为内网地址
10.1.4.182
5、curl访问
http://10.1.4.182:5601
var hashRoute = '/app/kibana';
var defaultRoute = '/app/kibana';
var hash = window.location.hash;
if (hash.length) {
window.location = hashRoute + hash;
} else {
window.location = defaultRoute;
} 6、浏览器访问后截图
https://s1.运维网.com/oss/201711/03/146f1945e757d729feadd8a871f692ac.png-wh_500x0-wm_3-wmp_4-s_3767543469.png
三、安装
1、配置yum源
编辑 /etc/yum.repos.d/logstash
name=Elastic repository for 5.x packages
baseurl=https://artifacts.elastic.co/packages/5.x/yum
gpgcheck=1
gpgkey=https://artifacts.elastic.co/GPG-KEY-elasticsearch
enabled=1
autorefresh=1
type=rpm-md
2、安装
yuminstall-ylogstash
安装完毕
页:
[1]