Redis——Redis叢集理論

2020-10-04 11:00:38

Redis——Redis叢集理論

一、為什麼需要搭建 Redis 叢集

在前面的文章中,我們已經學習過 Redis 在單機情況下,Redis 的常見應用:

  • 快取
  • 資料庫

如果是當作快取的時候,當服務掛掉重新啟動的時候,我們可以重新啟動一個新的範例,裡面什麼資料都沒有,這樣的話請求將會穿透快取,直接請求到資料庫,然後慢慢把熱資料載入到快取;也可以在重新啟動 Redis 服務的時候,就把百分之七八十的熱資料載入到快取,這樣就涉及到單機原生的持久化。因為是快取,允許部分資料丟失,所以使用 RDB 持久化就夠了,根據 dump.rdb 就能夠很快的恢復大量熱資料,對外提供服務

如果是當作資料庫的話,就需要保證資料不可丟失,就需要使用 RDB以快照或者 AOF 以紀錄檔方式進行持久化,以增量紀錄檔的方式保證資料不丟失。4.0 以後 AOF 以混合模式進行儲存,前半部分是 RDB,後面以追加寫的方式儲存紀錄檔

那麼為什麼生產中需要搭建叢集?一定是單機情況下,有些問題是無法解決的。那麼單機、單節點、單範例會有什麼問題?單機的 Redis 服務通常會有以下風險:

  • 單點故障
  • 容量有限
  • 壓力過大

1、單點故障

由於只有一個 Redis 程序對外提供服務,一旦伺服器出現斷電、宕機、卡死等等的意外問題,系統中就無法使用 Redis 快取服務,這樣大量請求就會大量到達資料庫,而資料庫儲存於磁碟,響應速度極慢,而且容易造成資料庫崩潰

簡單來說就是容易造成服務不可用,這在上線的生產環境中是不允許的

2、容量有限

如果一個特別大的系統,如淘寶、12306,資料特別多,資料量特別大,一個 Redis 服務 hold 住嗎?存的下嗎?

所以單機 Redis 服務的另一個問題就是容量有限,稍微大一點的系統,一個 Redis 服務無法支撐起來

3、壓力過大

由於只有一個 Redis 單機服務,則這個 Redis 程序將要處理所有的 client 端請求,以及所有的查詢、修改操作。無論是大量的連線帶來的 socket 壓力,還是 CPU 的密集型操作壓力,都會造成 Redis 服務程序壓力過大

那麼怎麼解決單機的問題呢?我們可以通過搭建多臺 Redis 服務,共同對外提供服務,減輕單臺壓力

二、AKF服務拆分原則

在《架構即未來》這本書,裡面提到的AKF擴充套件立方體,是業界公認的微服務拆分原則的最佳實踐,其核心思想就是:通過加機器可以解決容量和可用性問題(如果一臺不行就兩臺)

用個段子描述就是:在重慶沒有什麼事是一頓火鍋解決不了的,如果有,那就兩頓

既然是立方體,那麼這是一個三維的模型,分別包含X,Y,Z軸,三個不同維度相輔相成。示意圖如下:

在這裡插入圖片描述

1、X軸水平擴充套件

所謂 X 軸代表把同樣的工作或資料映象分配給多個實體,換句話說就是複製服務然後負載均衡。使單臺服務壓力降低,而且單臺服務掛掉之後,其他的服務能夠頂上來,提高容錯性

豪橫一點的說法就是:「我有錢,我就加機器來解決問題」

例子:

我有個網站,一開始部署在伺服器A上對外服務,隨著存取人數增加,一臺服務其的效能無法支援,於是我又在伺服器上B上同樣部署了網站,然後在前面部署了Apache或者Nginx來分流存取,這就是最基本的X軸擴充套件

但是基於 X 軸擴充套件,每臺伺服器都是儲存全量資料,在資料量很大的系統中,每臺機器容量有限,壓力很大

2、Y軸服務拆分

針對X軸擴充套件產生的問題,我們需要將大型服務進行拆解,把分割的工作指責和資料分配個多個實體,這也就是Y軸擴充套件,也是微服務理論誕生的基礎。

每個服務實現一組相關的功能,如訂單管理,客戶管理等。在工程上常見的方案是服務化架構(SOA),比如對於一個電子商務平臺,我們可以做如下拆分:

在這裡插入圖片描述

這樣進行拆分的話,當其中一個服務掛掉之後,不會影響其他服務正常對外提供服務

3、Z軸資料分割區

Z 軸擴充套件通常是指基於請求和使用者獨特的需求,進行系統劃分,並使得劃分出來的子系統相互隔離,但又是完整的

Z軸代表按照客戶、客戶的需要、位置或者價值分割或分配工作指責。一般在超大型系統中,架構設計就會面臨Z軸擴充套件的需求。

三、基於AKF的Redis叢集

Redis 叢集模型:

在這裡插入圖片描述

1、水平擴充套件

既然一臺 Redis 服務程序對外提供服務容易造成單點故障,那就使用多臺伺服器,每臺伺服器存放的資料相互之間實時同步,保證每臺機器裡面的都是全量資料。這樣,當其中一個服務程序範例掛掉之後,其餘程序範例能夠繼續對外提供服務

而且既然起了多臺服務,就不要浪費效能,可以讓多個程序範例組成主從關係,實現讀寫分離,減輕單臺主機壓力

2、縱向擴充套件

使用多臺主機雖然能夠避免單點故障,而且能夠組成讀寫分離,減輕單臺伺服器接收全部請求的壓力。但是每臺伺服器都是儲存的全量資料,當系統膨脹,資料量變大之後容量仍然是一個問題

此時我們可以把資料按照不同的功能進行劃分,不同業務的資料儲存在不同的服務程序,對外只提供此業務功能。這樣每臺服務就不需要儲存全量資料,解決單臺服務容量有限的問題。而且根據功能可以讓請求打到不同的伺服器,減輕單臺伺服器接收過多請求的壓力

四、叢集的問題——資料一致性

雖然水平擴充套件能夠解決單點故障的問題,但是每臺機器中都需要進行資料同步,當主伺服器接收到修改資料請求時,各個從屬伺服器也需要進行資料修改,保證資料一致性

保證資料一致性,可以分為以下情況

1、強一致性

強一致性:使用同步阻塞方式,所有節點阻塞直到資料全部一致

強一致性一直是企業所追求的情況,但是成本極其高昂,而且容易造成服務不可用

在這裡插入圖片描述

總結:強一致性容易破壞可用性,與我們使用叢集解決單點故障的初衷背道而馳,不可取

2、弱一致性

弱一致性:使用非同步方式,主伺服器不需要等待從伺服器執行結果,就可以給使用者端響應成功

弱一致性會造成資料丟失,資料不一致會產生大問題

在這裡插入圖片描述

3、最終一致性

最終一致性:在主從之間通過一個可靠的訊息元件,實現資料最終一定會一致

最終一致性可以有多種實現方式,如 kafka 等訊息佇列。但是在資料實現最終一致性之前,有可能請求到的資料並非最新的資料

在這裡插入圖片描述

這一種看起來還不錯,但是 Redis 也並沒有採用這種方式

Redis 最大的特點就是快,玩命的給客戶提供最快的響應速度,所以一定要儘量的減少技術的整合


本篇文章只是通過講解 Redis 單機會出現什麼問題,來引出為什麼需要搭建 Redis 叢集。Redis 叢集內容很多,如果在本篇文章中講解就會顯得主次不分,內容冗長,所以我們在後面的文章中將會通過以下兩個方面來詳細介紹 Redis 叢集:

  • X軸水平擴充套件:對 master 做HA高可用,解決單點故障問題
  • Y軸縱向擴充套件:通過叢集對資料進行分治,解決單臺機器容量有限問題

關聯文章:

Redis入門–萬字長文詳解epoll

Redis——詳解五種資料結構

Redis——Redis的進階使用(管道/釋出訂閱/事務/布隆過濾器)

Redis——Redis用作快取(記憶體回收/穿透/擊穿/雪崩)

Redis——Redis用作資料庫(持久化/RDB/AOF)