最近部署了ELK,將自己在部署過程中參考的文章總結一下
ELK版本:elasticsearch-5.2.2 kibana-5.2.2 logstash-2.4.1 all plugins
部署環境爲單臺服務器,未配置集羣
一、官網下載地址:https://www.elastic.co/downloads
二、elasticsearch安裝
1、由於安裝ELK需要jdk,因此沒有jdk的,先安裝1.8版本以上
[root@ELK-1 ~]# rpm -ivh jdk-8u121-linux-x64.rpm
2 、下載並安裝Elasticsearch
[root@ELK-1 ~]# rpm -ivh elasticsearch-5.2.2.rpm
3、 編輯配置文件,主要修改以下幾項
[root@ELK-1 ~]# vi /etc/elasticsearch/elasticsearch.yml
path.data: /data/elasticsearch #日誌存儲目錄
path.logs: /data/elasticsearch/log #elasticsearch啓動日誌路徑
network.host: 10.10.10.1 #這裏是主機IP
http.port: 9200 #api接口url
bootstrap.memory_lock: false #不鎖定內存
bootstrap.system_call_filter: false #需自行添加
4、 創建配置文件夾後啓動
[root@ELK-1 ~]# mkdir -pv /data/elasticsearch/log
5、修改文件夾所屬用戶
[root@ELK-1 ~]# grep elas /etc/passwd #查看安裝elasticsearch時自動創建 的用戶
[root@ELK-1 ~]# chown -R elasticsearch. /data/ #elasticsearch需使用該用戶啓動否則會報錯
6、修改內容參數,否則會報錯
[root@ELK-1 ~]# vim /etc/security/limits.conf # 在該文件最後的幾行,修改配置如下:
- soft core unlimited
- hard core unlimited
- soft nofile 65536
- hard nofile 131072
- soft nproc 2048
-
hard nproc 4096
[root@ELK-1 ~]# vim /etc/sysctl.conf # 在最下面添加如下內容:
vm.max_map_count=655360[root@ELK-1 ~]# vi /etc/security/limits.d/90-nproc.conf
找到如下內容:- soft nproc 1024
修改爲 -
soft nproc 2048
[root@ELK-1 ~]# sysctl -p
7、啓動elasticsearch
[root@ELK-1 ~]# service elasticsearch start
三、Kibana安裝
1、下載並安裝Kibana
[root@ELK-1 ~]# rpm -ivh kibana-5.2.2-x86_64.rpm
2、編輯配置文件,主要修改如下
[root@ELK-1 ~]# vi /opt/kibana/config/kibana.yml
server.port: 5601
server.host: "10.10.10.10"
elasticsearch.url: "http://10.10.10.10:9200"
kibana.index: ".kibana“3、 啓動並檢查是否安裝成功
[root@ELK-1 ~]# service kibana start
[root@ELK-1 ~]# netstat -ntlp|grep 5601 #檢查5601是否監聽
四、Logstash安裝
1、下載並安裝Logstash
[root@ELK-1 ~]# rpm -ivh logstash-2.4.1.noarch.rpm
#默認安裝位置:/opt/logstash2、創建配置文件
#配置文件位置:/etc/logstash/conf.dsyslog的logstash配置如下:
[root@ELK-1 ~]# cd /etc/logstash/conf.d
[root@ELK-1 ~]# vi syslog.conf
添加如下內容:
input {
syslog {
port => "514"
}
}
output {
elasticsearch {
hosts => ["10.10.10.10:9200"]
index => "logstash_syslog-%{+YYYY.MM.dd}"
}
}3、啓動logstash
[root@ELK-1 ~]# service rsyslog stop #關掉系統原本的syslog服務,不然會佔用514端口
[root@ELK-1 ~]# nohup /opt/logstash/bin/logstash -f syslog.conf
#最後去kibana上的Management上添加一個index pattern名爲logstashsyslog就能 使用啦
五、kibana web管理界面配置
1、打開http://10.10.10.10:5601/
2、可以開始使用了
- soft nproc 1024
參考文章:
https://jeffrycheng.com/2017/03/15/%E9%80%9A%E8%BF%87elk%E6%90%AD%E5%BB%BAsyslog%E5%92%8Csflow%E6%94%B6%E9%9B%86%E4%B8%8E%E5%88%86%E6%9E%90/
https://segmentfault.com/a/1190000007728789
http://www.cnblogs.com/liaojiafa/p/6139752.html
http://blog.51cto.com/tryingstuff/1888978