クバネティス(Kubernetes) 環境で Redis-Sentinel 構築実戦ガイド ②

構築(ポッド(Pod) 生成)

1. YAML ファイルを順次適用(生成)

1) Config 生成

💻 Terminal

$ kubectl apply -f redis-sentinel-config.yaml	➡ 適用(生成)
  configmap/redis-sentinel-config created	➡ 新規作成
  configmap/redis-sentinel-config configured ➡ 変更があるとき
  configmap/redis-sentinel-config unchanged ➡ 変更がないとき
$ kubectl get configmap redis-sentinel-config	➡ 確認
  NAME                        DATA  AGE
  redis-sentinel-config   3      21s
  * 'DATA 3' は redis.conf, users.acl, sentinel.conf ファイル 3つを意味する。

2) Service 生成

💻 Terminal

$ kubectl apply -f redis-sentinel-service.yaml	➡ 適用(生成)
  service/redis-sentinel-service created
$ kubectl get service redis-service	➡ 確認
  NAME            TYPE        CLUSTER-IP   EXTERNAL-IP   PORT(S)     AGE
  redis-service   ClusterIP   None         <none>        18504/TCP   39s
$ kubectl get service sentinel-service	➡ 確認
  NAME               TYPE        CLUSTER-IP   EXTERNAL-IP   PORT(S)     AGE
  sentinel-service   ClusterIP   None         <none>        28504/TCP   64s

3) StatefulSet 生成

💻 Terminal

$ kubectl apply -f redis-statefulset.yaml	➡ 適用(生成)
  statefulset.apps/redis-statefulset created
$ kubectl get pods -o wide	➡ Redis ポッド生成確認後に Sentinel 適用
$ kubectl apply -f sentinel-statefulset.yaml	➡ 適用(生成)
  statefulset.apps/sentinel created
$ kubectl get pods -o wide	➡ ポッド照会 🧮
  NAME              READY   STATUS    RESTARTS   AGE     IP            NODE  
  redis-0             1/1     Running   0          62s     10.42.0.92     rocky9
  redis-1             1/1     Running   0          55s     10.42.0.94     rocky9
  redis-2             1/1     Running   0          51s     10.42.0.96     rocky9
  sentinel-0        1/1     Running   0          37s     10.42.0.98     rocky9
  sentinel-1        1/1     Running   0          30s     10.42.0.100   rocky9
  sentinel-2        1/1     Running   0          24s     10.42.0.102   rocky9

Redis ポッド(Pod) 3個、Sentinel ポッド(Pod) 3個がすべて実行され、Redis-Sentinel が構成されました。

2. Redis-Sentinel 照会

1) 役割(マスター/レプリカ) 照会: redis-role.sh

役割(マスター/レプリカ) 確認用 Redis ROLE コマンドスクリプト

📄 redis-role.sh

#!/bin/bash
# 設定変数
PORT="18504"
PASSWORD="redisgate"
kubectl exec -i redis-0 -- redis-cli -p ${PORT} -a ${PASSWORD} role
kubectl exec -i redis-1 -- redis-cli -p ${PORT} -a ${PASSWORD} role
kubectl exec -i redis-2 -- redis-cli -p ${PORT} -a ${PASSWORD} role

実行(照会) 結果: 見やすいように編集しました。

💻 Terminal

$ redis-role.sh 
Redis-0
  master  ➡ Redis-0(自身)はマスターで、下に2つのレプリカがある。
    redis-1.redis-service.default.svc.cluster.local:18504
    redis-2.redis-service.default.svc.cluster.local:18504
Redis-1: slave:redis-0.redis-service.default.svc.cluster.local:18504 ➡ Redis-1はレプリカ、マスター 'redis-0'
Redis-2: slave:redis-0.redis-service.default.svc.cluster.local:18504 ➡ Redis-2はレプリカ、マスター 'redis-0'

2) Sentinel が監視する Redis 照会: sentinel-info.sh

Sentinel 確認用 Sentinel 'INFO SENTINEL' コマンドスクリプト

📄 sentinel-info.sh

#!/bin/bash
# 設定変数
PORT="28504"
PASSWORD="redisgate"
kubectl exec -i sentinel-0 -- redis-cli -p ${PORT} -a ${PASSWORD} info sentinel
kubectl exec -i sentinel-1 -- redis-cli -p ${PORT} -a ${PASSWORD} info sentinel
kubectl exec -i sentinel-2 -- redis-cli -p ${PORT} -a ${PASSWORD} info sentinel
#kubectl exec -i sentinel-0 -- redis-cli -p ${PORT} -a ${PASSWORD} role -> 役割照会
#kubectl exec -i sentinel-0 -- redis-cli -p ${PORT} -a ${PASSWORD} sentinel masters -> monitor 照会

実行(照会) 結果: 見やすいように編集しました。
Sentinel が監視するマスターは 'redis-0' で、レプリカは 2個(slaves=2)、Sentinel 総数は 3個(sentinels=3) です。

💻 Terminal

$ sentinel-info.sh 
Sentinel-0: master0:name=mymaster,status=ok,address=redis-0.redis-service...:18504,slaves=2,sentinels=3  
Sentinel-1: master0:name=mymaster,status=ok,address=redis-0.redis-service...:18504,slaves=2,sentinels=3
Sentinel-2: master0:name=mymaster,status=ok,address=redis-0.redis-service...:18504,slaves=2,sentinels=3

3. 🖧 Redis-Sentinel ポッド(Pod) ダイアグラム

┌───────────────┐ ┌───────────────┐ ┌───────────────┐ │Sentinel-0(98) │ │Sentinel-1(100)│ │Sentinel-2(102)│ └───────┬───────┘ └───────┬───────┘ └───────┬───────┘ └───────────────────┼───────────────────┘ ▼ ┌───────────────┐ │ Redis-0(92) │ │ 🟢Master │ └──────┬────────┘ ┌──────────┴───────────┐ ▼ ▼ ┌───────────────┐ ┌───────────────┐ │ Redis-1(94) │ │ Redis-2(96) │ │ 🟡Replica-1 │ │ 🟡Replica-2 │ └───────────────┘ └───────────────┘

4. 💽 データ入力

1) データ入力

Failover(障害対応) テストのため Redis-0 ポッド(Pod) をダウン(削除)すると、クバネティス(Kubernetes) が 2秒以内に redis-0 ポッド(Pod) を再び起動します。 down-after-milliseconds は 3秒なので Redis-0 のダウンを検知できません。そこで約 300万件のデータを入れて、ダウンしていた Redis の再起動に 5秒以上かかるようにします。 (データロードに約 5秒かかります)

💻 Terminal

$ kubectl exec -it redis-0 -- redis-benchmark -p 18504 -a password -t set -d 100 -r 100000000 -n 3000000   
  ====== SET ======
    3000000 requests completed in 30.89 seconds
  Summary:
    throughput summary: 97115.66 requests per second
    latency summary (msec):
            avg       min       p50       p95       p99       max
          0.428     0.128     0.407     0.639     0.831    16.159

2) データ入力の確認

① キー確認: 2,955,803 ➡ redis-benchmark はキーをランダム生成するため重複があり、300万件に少し届きません。

💻 Terminal

$ kubectl exec -it redis-0 -- redis-cli -p 18504 -a password dbsize

② AOF ファイルサイズ確認: aof.1.incr.aof 412M
③ ポッド(Pod) メモリ確認: Redis 617MB。Sentinel はデータを持たないためサイズは増えません。

💻 Terminal

$ kubectl top pod
  NAME              CPU(cores)   MEMORY(bytes)   
  redis-0           2m           617Mi
  redis-1           2m           617Mi
  redis-2           3m           617Mi
  sentinel-0        3m           8Mi
  sentinel-1        4m           8Mi
  sentinel-2        4m           8Mi

➡ ポッド(Pod) も生成し、データも入れたので、Failover(障害対応) テストに行きましょう。

<< K8s Redis-Sentinel 準備 ①	K8s Redis-Sentinel テスト ③ >>

Email 返事がかかってなれば、メールでお知らせします。