原创 elasticsearch-head安裝

elasticsearch-head安裝 Node.js環境安裝 head插件要求Node.js環境,並且Node.js的版本 大於等於 6.0。 下載 Node.js 12.13.0 版本。下載地址:https://nodejs

原创 logstash安裝

logstash安裝 從kafka接收數據,併發送到ElasticSearch 採集數據有java應用程序日誌、consul日誌 1. 安裝jdk1.8 rpm -ivh jdk-8u231-linux-x64.rpm [roo

原创 MinIO數據修復

一、安裝minio客戶端mc 1、下載二進制文件 wget https://dl.min.io/client/mc/release/linux-amd64/mc 2、賦予可執行權限 chmod +x mc 二、mc admin

原创 MinIO集羣安裝

一、基礎環境 操作系統:CentOS 7.3 二、準備工作 機器資源(根據實際情況調整) 172.16.10.226 4CPU 4G內存 數據盤:/minio-data1 /minio-data2 /minio-data3 /

原创 apollo集羣部署

apollo集羣部署 1. 準備工作 1.1. 服務器準備(配置根據情況調整) 準備好安裝apollo的三臺服務器 配置4CPU,4G內存,20GB硬盤 假設三臺服務器IP爲 172.16.10.208 172.16.10.20

原创 分佈式環境下的日誌處理架構(ELK)

分佈式環境下的日誌處理架構(ELK) 一、整體架構設計 filebeat: 負責日誌採集,採集的日誌包括服務日誌、中間件日誌等 kafka:負責數據緩存 logstash: 消費kafka的日誌,經過過濾後存儲到elastic

原创 Consul client端安裝

Consul client端安裝 1. 創建相應的目錄 mkdir -p /data/logs mkdir -p /data/consul_data 2. 下載安裝包 unzip consul_1.6.1_linux_amd64

原创 kibana安裝

1、kibana簡介 Kibana是一個爲Elasticsearch平臺分析和可視化的開源平臺,使用Kibana能夠搜索、展示存儲在Elasticsearch中的索引數據。使用它可以很方便用圖表、表格、地圖展示和分析數據。 Kib

原创 redis 告警參數優化

redis 告警參數優化 針對redis服務器TCP backlog、overcommit_memory、THP三個參數優化的說明 操作系統:CentOS Linux release 7.6.1810 (Core) 一、TCP b

原创 定時清理elasticsearch中的歷史數據

定時清理elasticsearch中的歷史數據 創建清理腳本 創建腳本目錄 mkdir -p /opt/server/cron 創建腳本 vim delete_elasticsearch_data.sh #!/bin

原创 redis數據遷移工具redis-migrate-tool安裝使用

Redis-Migrate-Tool 使用詳解 Redis 集羣遷移工具,基於redis複製,快速,穩定。 github鏈接:https://github.com/vipshop/redis-migrate-tool 特點: 快

原创 redis4.0.14集羣搭建

redis集羣搭建 搭建集羣工作需要以下三個步驟: 1)準備節點。 2)節點握手。 3)分配槽。 redis版本:4.0.14 準備節點 下載安裝包 mkdir -p /opt/server cd /opt/server wget

原创 logstash配置

logstash配置 logstash消費kafka日誌,過濾後發送到elasticsearch存儲 日誌包括:Java服務日誌、redis日誌、consul日誌、配置中心apollo日誌 logstash安裝參考:https:/

原创 Consul server集羣安裝

Consul server集羣安裝 1、機器準備 準備三臺機器:2CPU 4G內存 修改三臺機器的hostname分別爲consul1、consul2、consul3 配置host vim /etc/hosts 1

原创 elasticsearch安裝

1、機器準備 準備三臺機器:4CPU 4G內存 修改三臺機器的hostname分別爲es1、es2、es3 配置host vim /etc/hosts 10.0.0.11 es1 10.0.0.12 es2 10.