KubenetesでSentinelを使ってRedis Clusterを立ち上げる

Sentinelとは

SentinelとはRedisクラスターを簡単に構築することができるソフトウェアです。マスター・スレーブ構成になっており、マスターの自動昇格も行ってくれる優れものです。

Kubernetesでの構築

この手順は 「入門Kubernetes」に記載されているものを実践しています。

ConfigMapの作成

まずはRedisのマスター用の設定ファイルmaster.confを記述します。

bind 0.0.0.0
port 6379

dir /redis-data

次にスレーブ用の設定ファイルslave.confを記述します。

bind 0.0.0.0
port 6379

dir .

slaveof redis-0.redis 6379

最後にsentinel用の設定ファイルsentinel.confを記述します。

bind 0.0.0.0
port 26379

sentinel monitor redis redis-0.redis 6379 2
sentinel parallel-syncs redis 1
sentinel down-after-milliseconds redis 10000
sentinel failover-timeout redis 20000

コンテナ内でRedisを起動するときのスクリプトinit.shです。

#!/bin/bash
if [[ ${HOSTNAME} == 'redis-0' ]]; then
  redis-server /redis-config/master.conf
else
  redis-server /redis-config/slave.conf
fi

Redisスレーブがマスターに接続できるまで監視して、sentinelを起動するスクリプトsentinel.shです。

#!/bin/bash
while ! ping -c 1 redis-0.redis; do
    echo 'Waiting for server'
    sleep 1
done

redis-sentinel /redis-config/sentinel.conf

上記の設定ファイルとスクリプトをまとめたConfigMapを作成します。redis-configという名前をつけています。

$ kubectl create configmap \
> --from-file=slave.conf=./slave.conf \
> --from-file=master.conf=./master.conf \
> --from-file=sentinel.conf=./sentinel.conf \
> --from-file=init.sh=./init.sh \
> --from-file=sentinel.sh=./sentinel.sh \
> redis-config

ConfigMapの確認を行います。

$ kubectl get configmap

Serviceの作成

PodへアクセスするためのServiceの設定redis-service.yamlです。

apiVersion: v1
kind: Service
metadata:
  name: redis
spec:
  ports:
  - port: 6379
    name: peer
  clusterIP: None
  selector:
    app: redis

上記設定からServiceを作成します。

$ kubectl apply -f redis-service.yaml

Serviceの確認を行います。

$ kubectl get service

StatefulSetの作成

StatefulSetの設定redis.yamlです。

apiVersion: apps/v1
kind: StatefulSet
metadata:
  name: redis
spec:
  selector:
    matchLabels:
      app: redis
  replicas: 3
  serviceName: redis
  template:
    metadata:
      labels:
        app: redis
    spec:
      containers:
      - command: [sh, -c, source /redis-config/init.sh ]
        image: redis:3.2.7-alpine
        name: redis
        ports:
        - containerPort: 6379
          name: redis
        volumeMounts:
        - mountPath: /redis-config
          name: config
        - mountPath: /redis-data
          name: data
      - command: [sh, -c, source /redis-config/sentinel.sh]
        image: redis:3.2.7-alpine
        name: sentinel
        volumeMounts:
        - mountPath: /redis-config
          name: config
      volumes:
      - configMap:
          defaultMode: 420
          name: redis-config
        name: config
      - emptyDir:
        name: data

StatefulSetの作成を行います。

$ kubectl apply -f redis.yaml

StatefulSetの確認を行います。

$ kubectl get statefulset

Sentinelの動作確認

Redisスレーブに対してコマンドを実行し、seintinelのRedisマスタのIPを確認します。

$ kubectl exec redis-2 -c redis \
> -- redus-cli -p 26379 sentinel get-master-addr-by-name redis

ここでRedisスレーブに対して接続ができなかったのでredis-0コンテナのログを確認します。

$ kubectl -c sentinel logs redis-0
ping: bad address 'redis-0.redis'
Waiting for server
PING redis-0.redis (172.17.0.4): 56 data bytes
64 bytes from 172.17.0.4: seq=0 ttl=64 time=0.164 ms

--- redis-0.redis ping statistics ---
1 packets transmitted, 1 packets received, 0% packet loss
round-trip min/avg/max = 0.164/0.164/0.164 ms
                _._
           _.-__ ''-._
      _.-    .  _.  ''-._           Redis 3.2.7 (00000000/0) 64 bit
  .- .-.  \/    _.,_ ''-._
 (    '      ,       .-  | ,    )     Running in sentinel mode
 |-._-...- __...-.-._|' _.-'|     Port: 26379
 |    -._   ._    /     _.-'    |     PID: 9
  -._    -._  -./  _.-'    _.-'
 |-._-._    -.__.-'    _.-'_.-'|
 |    -._-._        _.-'_.-'    |           http://redis.io
  -._    -._-.__.-'_.-'    _.-'
 |-._-._    -.__.-'    _.-'_.-'|
 |    -._-._        _.-'_.-'    |
  -._    -._-.__.-'_.-'    _.-'
      -._    -.__.-'    _.-'
          -._        _.-'
              `-.__.-'

9:X 18 May 07:36:03.983 # WARNING: The TCP backlog setting of 511 cannot be enforced because /proc/sys/net/core/somaxconn is set to the lower value of 128.
9:X 18 May 07:36:03.983 # Sentinel config file /redis-config/sentinel.conf is not writable: Read-only file system. Exiting...

sentinelの設定がよくなさそう。。。ここで詰んでしまいRedisクラスタの動作確認ができてません。

だれか同じような人いたら解決策をおしえてほしいです！

おすすめ書籍

Dockerの使い方から説明されているので初心者の方も安心して学べる書籍です。

Kubernetesに関してはPod, Service, Deploymentなどを順を追って説明し、実際に動かすところまでを解説しているので非常に実践的な内容となっています。

これからKuebernetesを使ってサービスを開発してみたい方にとって最初のよい手助けとなると思います。是非読んでみてください。

入門 Kubernetes

posted with ヨメレバ

Kelsey Hightower,Brendan Burns,Joe Beda オライリージャパン 2018-03-22

Amazon

Kindle

楽天ブックス

The following two tabs change content below.

• この記事を書いた人
• 最新の記事

髙妻智一

2013年CyberAgent新卒入社 スマホゲームを作る子会社に所属し、サーバーサイドのエンジニアを担当。２年目の終わりから新規子会社の立ち上げに参加し、サーバーサイドのエンジニアリーダーとしてサービースのリリースから運用までを担当。 2018年仮想通貨のスマホウォレットを提供するGinco Incにブロックチェーンエンジニアとして入社。

最新記事 by 髙妻智一 (全て見る)

• Polkadot(Substrate)のアドレスとトランザクションについて - 2023-03-09
• 【無料公開】「Goで始めるBitcoin」3章 Bitcoinノードとの通信　技術書典8 - 2020-03-08
• エンジニアがゼロから技術ブログを書くための方法をまとめました - 2019-05-25