三臺伺服器使用docker搭建redis一主二從三哨兵,概念-搭建-整合springboot

2023-01-03 18:00:36

一、前言

redis在我們企業級開發中是很常見的,但是單個redis不能保證我們的穩定使用,所以我們要建立一個叢集。
redis有兩種高可用的方案:

  • High availability with Redis Sentinel(哨兵)
  • Scaling with Redis Cluster(分片叢集)

第一個就是我們本次的要搭建的,就是高可用的哨兵,主redis掛掉,哨兵會進行投票進行故障轉移
第二個就是分片叢集,哨兵的一個缺點就是隻能存在一個master節點,寫的效率太低。分片叢集就是解決哨兵的問題,可以水平擴充套件,提高redis的效能!

哨兵最低配是三哨兵,以奇數遞增。
分片叢集最低配是三主三從。

小編之前寫過一篇在一臺機器上搭建的文章,大家有興趣可以先去體驗一下,實際生產上不會讓你一臺機器上;也沒有任何意義,伺服器掛了,再多的叢集也全部掛掉了!!

docker compose搭建redis7.0.4高可用一主二從三哨兵叢集並整合SpringBoot

二、準備

首先我們要準備:
三臺伺服器(沒有的條件的搭三個虛擬機器器),巧了小編就是虛擬機器器哈!

三臺機器的ip和名稱在表格裡整理一下!

ip redis節點名稱 sentinel節點名稱
192.168.239.131 redis-master redis-sentinel-1
192.168.239.130 redis-slave-1 redis-sentinel-2
192.168.239.128 redis-slave-2 redis-sentinel-3

三、Sentinel概念

Redis Sentinel 在不使用Redis Cluster時為 Redis 提供高可用性

Sentinel功能的完整列表:

  • 監控:Sentinel 不斷檢查您的主範例和副本範例是否按預期工作。
  • 通知:Sentinel 可以通過 API 通知系統管理員或其他計算機程式,其中一個受監控的 Redis 範例出現問題。
  • 自動故障轉移:如果 master 沒有按預期工作,Sentinel 可以啟動一個故障轉移過程,其中一個副本被提升為 master,其他額外的副本被重新設定為使用新的 master,並且使用 Redis 伺服器的應用程式被告知要使用的新地址連線時。
  • 自動更新設定:Sentinel 充當使用者端服務發現的權威來源:使用者端連線到 Sentinels 以詢問負責給定服務的當前 Redis master 的地址。如果發生故障轉移,Sentinels 將報告新地址。

官方哨兵搭建條件:

  • 您至少需要三個 Sentinel 範例才能進行可靠的部署。
  • 三個 Sentinel 範例應該放置在被認為以獨立方式發生故障的計算機或虛擬機器器中。因此,例如在不同可用區上執行的不同物理伺服器或虛擬機器器

詳細介紹和使用:請見官網 --->官網詳細檔案

四、一主二從搭建

話不多說,咱們直接開始搭建哈!

1. 建立掛載目錄

三臺機器上新建目錄:
首先我們開啟三個xshell視窗,然後同時操作三個視窗建立

然後再左下角選擇傳送到全部視窗!

cd /
mkdir mydata
cd /mydata
mkdir redis
cd redis
mkdir data
mkdir conf
cd conf

2. 在192.168.239.131機器上編輯檔案

vim redis.conf

輸入以下內容:

# 任何都可以連線redis
bind 0.0.0.0
# 設定master密碼
requirepass 123456
# 宕機後成為從要連線master的密碼
masterauth 123456
# 開啟持久化
appendonly yes

3. 在192.168.239.130機器上編輯檔案

vim redis.conf

輸入以下內容:

# 設定master的ip和埠號
replicaof 192.168.239.131 6379
# 任何都可以連線redis
bind 0.0.0.0
# 成為master後的密碼
requirepass 123456
# 連線master密碼
masterauth 123456
# 開啟持久化
appendonly yes

4. 在192.168.239.128機器上編輯檔案

vim redis.conf

輸入以下內容:

# 設定master的ip和埠號
replicaof 192.168.239.131 6379
# 任何都可以連線redis
bind 0.0.0.0
# 成為master後的密碼
requirepass 123456
# 連線master密碼
masterauth 123456
# 開啟持久化
appendonly yes

5. 192.168.239.131啟動redis

docker run -p 6379:6379 --name redis-master \
-v /mydata/redis/data:/usr/local/etc/redis/data \
-v /mydata/redis/conf/redis.conf:/usr/local/etc/redis/redis.conf \
-d redis redis-server /usr/local/etc/redis/redis.conf

檢視啟動紀錄檔:

docker logs -f redis-master

6. 192.168.239.130啟動redis

docker run -p 6379:6379 --name redis-slave-1 \
-v /mydata/redis/data:/usr/local/etc/redis/data \
-v /mydata/redis/conf/redis.conf:/usr/local/etc/redis/redis.conf \
-d redis redis-server /usr/local/etc/redis/redis.conf

可以看到已經連線到master節點了!

7. 192.168.239.128啟動redis

docker run -p 6379:6379 --name redis-slave-2 \
-v /mydata/redis/data:/usr/local/etc/redis/data \
-v /mydata/redis/conf/redis.conf:/usr/local/etc/redis/redis.conf \
-d redis redis-server /usr/local/etc/redis/redis.conf

8. 進入192.168.239.130容器檢視

我們檢視master紀錄檔,可以看到兩個從節點已經加入進來了!

我們進入容器進行在次檢視:

docker exec -it redis-master /bin/bash

連線redis:

redis-cli

登入redis

auth 123456

檢視從節點:

info

也是可以看到有兩個從節點!

五、搭建三哨兵sentinel

1. 建立掛載目錄

還是三個虛擬機器器一起建立

mkdir sentinel
cd sentinel
vim sentinel.conf

輸入下面內容:

port 26379
sentinel monitor redis-master 192.168.239.131 6379 2
sentinel auth-pass redis-master 123456
sentinel down-after-milliseconds redis-master 6000
sentinel parallel-syncs redis-master 1
sentinel failover-timeout redis-master 6000

第二行:Redis 監控一個名為redis-master的redis叢集,我們可以隨意寫;後面就是ip,我們宿主機的ip即可,埠為主redis的埠;2為哨兵投票的票數,當主redis宕機,三個哨兵必須兩個哨兵都投票的redis才會變為主!!
第三行:設定master的密碼
第四行:Sentinel判斷範例進入主觀下線所需的時間,毫秒單位。
第五行:限制在一次故障轉移之後,每次向新的主節點同時發起複製操作節點個數,越大效率越慢。
第六行:在指定的時間內未能完成failover故障轉移,則任務故障轉移失敗。

2. 執行192.168.239.131哨兵

docker run -p 26379:26379 --name redis-sentinel-1 \
-v /mydata/redis/sentinel/sentinel.conf:/usr/local/etc/redis/sentinel.conf \
-d redis redis-sentinel /usr/local/etc/redis/sentinel.conf

3. 執行192.168.239.130哨兵

docker run -p 26379:26379 --name redis-sentinel-2 \
-v /mydata/redis/sentinel/sentinel.conf:/usr/local/etc/redis/sentinel.conf \
-d redis redis-sentinel /usr/local/etc/redis/sentinel.conf

3. 執行192.168.239.128哨兵

docker run -p 26379:26379 --name redis-sentinel-3 \
-v /mydata/redis/sentinel/sentinel.conf:/usr/local/etc/redis/sentinel.conf \
-d redis redis-sentinel /usr/local/etc/redis/sentinel.conf

4. 待解決問題

這裡建立三個哨兵,檢視卻是有四個,不知道什麼問題,換了虛擬機器器還是不行!有大佬懂的可以分享一下哈!!

六、測試主從和故障轉移

1. 測試主從複製

master節點建立一個鍵值對:

set a b

從檢視key是否存在:

get a


主從沒有問題哈!

2. 測試故障轉移

我們把master停掉,檢視一個哨兵的紀錄檔:

docker stop redis-master
docker logs -f redis-sentinel-1 

我們看到192.168.239.130成為master!


重新啟動原來的master:

docker restart redis-master 

故障轉移成功!!

七、整合springboot

1. 匯入依賴

小編的springboot版本為:2.7.4

<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-data-redis</artifactId>
</dependency>
<dependency>
    <groupId>org.springframework.boot</groupId>
    <artifactId>spring-boot-starter-web</artifactId>
</dependency>

2. yml設定

password密碼和sentinel同級,不然找不到密碼,驗證失敗

server:
  port: 8087

spring:
  redis:
    # 密碼和sentinel同級,不然找不到密碼,驗證失敗
    password: 123456
    sentinel:
      # sentinel.conf裡的叢集名稱
      master: my-master
      # 我們只需要連哨兵即可,哨兵內部會幫我們找到redis
      nodes:
        - 192.168.239.131:26379
        - 192.168.239.130:26379
        - 192.168.239.128:26379

3. json序列化設定

/**
 * @author wangzhenjun
 * @date 2022/11/24 10:37
 */
@Configuration
public class RedisConfig {

    @Bean
    @SuppressWarnings(value = { "unchecked", "rawtypes" })
    public RedisTemplate<Object, Object> redisTemplate(RedisConnectionFactory connectionFactory)
    {
        RedisTemplate<Object, Object> template = new RedisTemplate<>();
        template.setConnectionFactory(connectionFactory);
        Jackson2JsonRedisSerializer serializer = new Jackson2JsonRedisSerializer(Object.class);

        // 使用StringRedisSerializer來序列化和反序列化redis的key值
        template.setKeySerializer(new StringRedisSerializer());
        template.setValueSerializer(serializer);

        // Hash的key也採用StringRedisSerializer的序列化方式
        template.setHashKeySerializer(new StringRedisSerializer());
        template.setHashValueSerializer(serializer);

        template.afterPropertiesSet();
        return template;
    }
}

4. 新建controller測試

/**
 * @author wangzhenjun
 * @date 2022/11/24 10:37
 */
@RestController
public class TestController {

    @Autowired
    private RedisTemplate redisTemplate;

    @GetMapping("/redis")
    public void saveRedis(){
        redisTemplate.opsForValue().set("test","看到我就成功了");
    }
}

5. 測試

http://localhost:8087/test/redis

6. 檢視redis

八、總結

經過一天的搭建,終於完成了,雖然不是完美的,但是大體功能是沒有問題的!但是不影響故障轉移和主從複製!

唯一的遺憾:三個哨兵,檢視就是四個!從第三個哨兵加入後變為4個!

如果對你有幫助,還請不要吝嗇您的發財小手,你的一鍵三連是我寫作的動力,謝謝大家哈!!


可以看下一小編的微信公眾號,文章首發看,歡迎關注,一起交流哈!!