redis集羣搭建(非常詳細,適合新手)

redis集羣搭建

在開始redis集羣搭建之前,我們先簡單回顧一下redis單機版的搭建過程

  1. 下載redis壓縮包,然後解壓壓縮文件;
  2. 進入到解壓縮後的redis文件目錄(此時可以看到Makefile文件),編譯redis源文件;
  3. 把編譯好的redis源文件安裝到/usr/local/redis目錄下,如果/local目錄下沒有redis目錄,會自動新建redis目錄;
  4. 進入/usr/local/redis/bin目錄,直接./redis-server啓動redis(此時爲前端啓動redis);
  5. 將redis啓動方式改爲後端啓動,具體做法:把解壓縮的redis文件下的redis.conf文件複製到/usr/local/redis/bin目錄下,然後修改該redis.conf文件->daemonize:no 改爲daemonize:yse;
  6. 在/bin目錄下通過./redis-server redis.conf啓動redis(此時爲後臺啓動)。
    綜上redis單機版安裝啓動完成。
    具體詳細帶圖步驟請參考 -> redis入門
    請原諒我的囉嗦,ok,接着咱們回到本次話題----redis集羣搭建!

一、Redis Cluster(Redis集羣)簡介

  • redis是一個開源的key value存儲系統,受到了廣大互聯網公司的青睞。redis3.0版本之前只支持單例模式,在3.0版本及以後才支持集羣,我這裏用的是redis3.0.0版本;
  • redis集羣採用P2P模式,是完全去中心化的,不存在中心節點或者代理節點;
  • redis集羣是沒有統一的入口的,客戶端(client)連接集羣的時候連接集羣中的任意節點(node)即可,集羣內部的節點是相互通信的(PING-PONG機制),每個節點都是一個redis實例;
  • 爲了實現集羣的高可用,即判斷節點是否健康(能否正常使用),redis-cluster有這麼一個投票容錯機制:如果集羣中超過半數的節點投票認爲某個節點掛了,那麼這個節點就掛了(fail)。這是判斷節點是否掛了的方法;
  • 那麼如何判斷集羣是否掛了呢? -> 如果集羣中任意一個節點掛了,而且該節點沒有從節點(備份節點),那麼這個集羣就掛了。這是判斷集羣是否掛了的方法;
  • 那麼爲什麼任意一個節點掛了(沒有從節點)這個集羣就掛了呢? -> 因爲集羣內置了16384個slot(哈希槽),並且把所有的物理節點映射到了這16384[0-16383]個slot上,或者說把這些slot均等的分配給了各個節點。當需要在Redis集羣存放一個數據(key-value)時,redis會先對這個key進行crc16算法,然後得到一個結果。再把這個結果對16384進行求餘,這個餘數會對應[0-16383]其中一個槽,進而決定key-value存儲到哪個節點中。所以一旦某個節點掛了,該節點對應的slot就無法使用,那麼就會導致集羣無法正常工作。
  • 綜上所述,每個Redis集羣理論上最多可以有16384個節點。

二、集羣搭建需要的環境
2.1 Redis集羣至少需要3個節點,因爲投票容錯機制要求超過半數節點認爲某個節點掛了該節點纔是掛了,所以2個節點無法構成集羣。
2.2 要保證集羣的高可用,需要每個節點都有從節點,也就是備份節點,所以Redis集羣至少需要6臺服務器。因爲我沒有那麼多服務器,也啓動不了那麼多虛擬機,所在這裏搭建的是僞分佈式集羣,即一臺服務器虛擬運行6個redis實例,修改端口號爲(7001-7006),當然實際生產環境的Redis集羣搭建和這裏是一樣的。
2.3 安裝ruby
三、集羣搭建具體步驟如下(注意要關閉防火牆)
3.1 在usr/local目錄下新建redis-cluster目錄,用於存放集羣節點
新建Redis集羣目錄
3.2 把redis目錄下的bin目錄下的所有文件複製到/usr/local/redis-cluster/redis01目錄下,不用擔心這裏沒有redis01目錄,會自動創建的。操作命令如下(注意當前所在路徑):

cp -r redis/bin/ redis-cluster/redis01
  • 1

在這裏插入圖片描述
3.3 刪除redis01目錄下的快照文件dump.rdb,並且修改該目錄下的redis.cnf文件,具體修改兩處地方:一是端口號修改爲7001,二是開啓集羣創建模式,打開註釋即可。分別如下圖所示:
刪除dump.rdb文件
刪除dump.rdb文件
修改端口號爲7001,默認是6379
在這裏插入圖片描述
將cluster-enabled yes 的註釋打開
在這裏插入圖片描述
3.4 將redis-cluster/redis01文件複製5份到redis-cluster目錄下(redis02-redis06),創建6個redis實例,模擬Redis集羣的6個節點。然後將其餘5個文件下的redis.conf裏面的端口號分別修改爲7002-7006。分別如下圖所示:
創建redis02-06目錄
在這裏插入圖片描述

分別修改redis.conf文件端口號爲7002-7006
在這裏插入圖片描述
3.5 接着啓動所有redis節點,由於一個一個啓動太麻煩了,所以在這裏創建一個批量啓動redis節點的腳本文件,命令爲start-all.sh,文件內容如下:

cd redis01
./redis-server redis.conf
cd ..
cd redis02
./redis-server redis.conf
cd ..
cd redis03
./redis-server redis.conf
cd ..
cd redis04
./redis-server redis.conf
cd ..
cd redis05
./redis-server redis.conf
cd ..
cd redis06
./redis-server redis.conf
cd ..

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19

3.6 創建好啓動腳本文件之後,需要修改該腳本的權限,使之能夠執行,指令如下:

chmod +x start-all.sh
  • 1

在這裏插入圖片描述
3.7 執行start-all.sh腳本,啓動6個redis節點
在這裏插入圖片描述
3.8 ok,至此6個redis節點啓動成功,接下來正式開啓搭建集羣,以上都是準備條件。大家不要覺得圖片多看起來冗長所以覺得麻煩,其實以上步驟也就一句話的事情:創建6個redis實例(6個節點)並啓動。
要搭建集羣的話,需要使用一個工具(腳本文件),這個工具在redis解壓文件的源代碼裏。因爲這個工具是一個ruby腳本文件,所以這個工具的運行需要ruby的運行環境,就相當於java語言的運行需要在jvm上。所以需要安裝ruby,指令如下:

yum install ruby
  • 1

然後需要把ruby相關的包安裝到服務器,我這裏用的是redis-3.0.0.gem,大家需要注意的是:redis的版本和ruby包的版本最好保持一致。
將Ruby包安裝到服務器:需要先下載再安裝,如圖
在這裏插入圖片描述
安裝命令如下:

gem install redis-3.0.0.gem
  • 1

在這裏插入圖片描述

3.9 上一步中已經把ruby工具所需要的運行環境和ruby包安裝好了,接下來需要把這個ruby腳本工具複製到usr/local/redis-cluster目錄下。那麼這個ruby腳本工具在哪裏呢?之前提到過,在redis解壓文件的源代碼裏,即redis/src目錄下的redis-trib.rb文件。
在這裏插入圖片描述
在這裏插入圖片描述
3.10 將該ruby工具(redis-trib.rb)複製到redis-cluster目錄下,指令如下:

cp redis-trib.rb /usr/local/redis-cluster
  • 1

然後使用該腳本文件搭建集羣,指令如下:

./redis-trib.rb create --replicas 1 47.106.219.251:7001 47.106.219.251:7002 47.106.219.251:7003 47.106.219.251:7004 47.106.219.251:7005 47.106.219.251:7006
  • 1

注意:此處大家應該根據自己的服務器ip輸入對應的ip地址!
在這裏插入圖片描述

中途有個地方需要手動輸入yes即可
在這裏插入圖片描述
至此,Redi集羣搭建成功!大家注意最後一段文字,顯示了每個節點所分配的slots(哈希槽),這裏總共6個節點,其中3個是從節點,所以3個主節點分別映射了0-5460、5461-10922、10933-16383solts。

3.11 最後連接集羣節點,連接任意一個即可:

redis01/redis-cli -p 7001 -c 
  • 1

注意:一定要加上-c,不然節點之間是無法自動跳轉的!如下圖可以看到,存儲的數據(key-value)是均勻分配到不同的節點的:
在這裏插入圖片描述

四、結語
呼~~~長舒一口氣…終於搭建好了Redis集羣。
整個過程其實挺簡單,本篇主要正對入門級別的小夥伴,插入了很多圖片,所以顯得冗長,希望大家多多理解,如果不當之處,還望及時指正~

最後,加上兩條redis集羣基本命令:
1.查看當前集羣信息

cluster info
  • 1

2.查看集羣裏有多少個節點

cluster nodes
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章