三台Centos7.9中Docker部署Redis集群

1. 安装 Docker 和 Docker Compose

安装 Docker：

# 更新系统
sudo yum update -y

# 安装 Docker 依赖
sudo yum install -y yum-utils device-mapper-persistent-data lvm2

# 安装 Docker
sudo yum install -y docker

# 启动 Docker 服务
sudo systemctl start docker

# 设置 Docker 开机启动
sudo systemctl enable docker

# 检查 Docker 是否安装成功
docker --version

安装 Docker Compose：

• 若次步骤觉得太慢，建议使用github自行下载后安装

# 自行安装使用这个，反之使用下面的
# mv docker-compose-linux-x86_64 /usr/local/bin/docker-compose

# 下载最新版本的 Docker Compose
sudo curl -L "https://github.com/docker/compose/releases/download/1.29.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose

# 给 Docker Compose 添加执行权限
sudo chmod +x /usr/local/bin/docker-compose

# 检查安装版本
docker-compose --version

2. 配置 Redis 容器和网络

在 CentOS 上，创建每台服务器所需的 Redis 配置 和 Docker 网络，确保各容器之间的网络连接。

假设你有三台服务器，Server 1、Server 2 和 Server 3，每台服务器运行两个 Redis 实例。需要做以下操作：

第一步：为每台服务器创建 docker-compose.yml 配置文件
在 Server 1、Server 2 和 Server 3 上创建和配置 docker-compose.yml 文件。

配置文件示例：
创建一个目录，并进入该目录：

mkdir ~/redis-cluster
cd ~/redis-cluster

docker-compose.yml 示例：

version: '3'

services:
  redis-7001:
    image: redis:6.0
    container_name: redis-7001
    ports:
      - "7001:7001"
      - "17001:17001"
    volumes:
      - ./7001/data:/data
      - ./7001/redis.conf:/etc/redis/redis.conf
    command: redis-server /etc/redis/redis.conf
    networks:
      - redis-cluster
    restart: always

  redis-7002:
    image: redis:6.0
    container_name: redis-7002
    ports:
      - "7002:7002"
      - "17002:17002"
    volumes:
      - ./7002/data:/data
      - ./7002/redis.conf:/etc/redis/redis.conf
    command: redis-server /etc/redis/redis.conf
    networks:
      - redis-cluster
    restart: always

networks:
  redis-cluster:
    driver: bridge

redis.conf实例：

# 绑定所有网络接口，允许外部机器连接
bind 0.0.0.0
# 设置节点的端口（为每个节点配置不同端口）
port 7001
cluster-enabled yes
# 节点的集群配置文件
cluster-config-file nodes-7001.conf
cluster-node-timeout 5000
maxclients 10000
# 不进行持久化存储，节省资源
save ""
# 禁用 append-only 文件持久化
appendonly no
protected-mode no
loglevel notice
logfile ""
# 集群的对外配置（announce 是告知外部客户端的节点地址）
cluster-announce-ip 192.168.15.128
cluster-announce-port 7001
cluster-announce-bus-port 17001

修改配置：
在 Server 2 和 Server 3 上修改 docker-compose.yml 文件，调整每台服务器上的端口。例如：

Server 2：redis-7003 和 redis-7004
Server 3：redis-7005 和 redis-7006

3. 启动 Redis 容器

创建并启动 Docker 容器：
在每台服务器上，执行以下命令以启动 Redis 容器。

docker-compose up -d

这将会根据配置创建并启动 Redis 容器。

使用 docker ps 可以查看正在运行的容器：

docker ps

检查容器启动状态：
在每台服务器上，确认容器启动后没有错误。

4. 设置 Redis 集群

当所有 Redis 容器在三台服务器上运行并可以互相通信时，我们将通过 redis-cli 创建一个 Redis 集群。

创建 Redis 集群：
在任意一台服务器（如 Server 1）上执行以下命令，创建 Redis 集群：

docker exec -it redis-7001 redis-cli --cluster create \
192.168.15.128:7001 192.168.15.128:7002 \
192.168.15.129:7003 192.168.15.129:7004 \
192.168.15.130:7005 192.168.15.130:7006 \
--cluster-replicas 1

这里 192.168.15.128:7001、192.168.15.129:7003 和 192.168.15.130:7005 是主节点，7002、7004、7006 是它们的从节点。
–cluster-replicas 1 表示为每个主节点设置一个从节点。
根据提示输入 yes，完成集群创建。

4.1 集群创建异常处理

搭建Redis集群的过程中，执行到cluster create : … 的时候，发现程序发生阻塞，显示：Waiting for the cluster to join 的字样，然后就无休无尽的等待…

解决方案：

• 关注点1：防火墙的问题，记得开放防火墙
• 关注点2：Redis集群需要关注如下内容：

集群总线
每个Redis集群中的节点都需要打开两个TCP连接。一个连接用于正常的给Client提供服务，比如6379，还有一个额外的端口（通过在这个端口号上加10000）作为数据端口，例如：redis的端口为6379，那么另外一个需要开通的端口是：6379 + 10000， 即需要开启 16379。16379端口用于集群总线，这是一个用二进制协议的点对点通信信道。这个集群总线（Cluster bus）用于节点的失败侦测、配置更新、故障转移授权，等等。

firewall-cmd --list-ports

firewall-cmd --zone=public --add-port=7001/tcp  --add-port=7002/tcp --add-port=17001/tcp --add-port=17002/tcp --permanent
firewall-cmd --reload

firewall-cmd --zone=public --add-port=7003/tcp  --add-port=7004/tcp --add-port=17003/tcp --add-port=17004/tcp --permanent
firewall-cmd --reload

firewall-cmd --zone=public --add-port=7005/tcp  --add-port=7006/tcp --add-port=17005/tcp --add-port=17006/tcp --permanent
firewall-cmd --reload

验证集群：

创建完成后，可以在任意节点执行以下命令查看集群状态：

docker exec -it redis-7001 redis-cli -p 7001 cluster nodes

5. 验证和测试

查看集群节点，确认每个节点是否分配了槽，并且是主从配置。
对集群进行基本的增删改查操作，确保每个节点之间的数据同步。
测试：
向集群写入数据：

docker exec -it redis-7001 redis-cli -c -p 7001 set key1 "value1"

从其他节点读取数据：

docker exec -it redis-7002 redis-cli -c -p 7002 get key1

总结

你需要在每台服务器上使用 Docker 容器部署 Redis 实例，每台服务器配置两个 Redis 容器，一个主节点，一个从节点。
使用 Docker Compose 管理每台服务器上的 Redis 实例。
配置 Redis 集群时，可以通过 redis-cli --cluster create 命令来创建集群。
Redis 集群成功创建后，可以通过 cluster nodes 命令验证集群状态。
使用上述步骤，你可以在 CentOS 上安装并成功配置一个包含 6 个节点的 Redis 集群，分布在 3 台服务器 上。