主从哨兵结构-测试环境

单宿主机：

因192.168.1.226测试服务器为单一宿主机，又需要与正式服务器一样，具体相同的集群环境，所以在单宿主机上，搭建主从哨兵结构的redis集群：

1、结构

配置文件

项目目录:/home/rediscluster/

docker-compose.yml

version: '3.3'
networks:
redis-bridge:
external:
name: redis_cluster_bridge
services:
redis-node1:
image: 'bitnami/redis:6.2'
networks:
- redis-bridge
container_name: redis-node1
ports:
- '6381:6379'
environment:
- REDIS_REPLICATION_MODE=master
- REDIS_PASSWORD=abcd123456
- REDIS_MASTER_PASSWORD=abcd123456
- REDIS_REPLICA_IP=192.168.2.226
- REDIS_REPLICA_PORT=6381
- TZ=Asia/Shanghai
volumes:
- '/home/rediscluster/data/node1:/bitnami'
redis-node2:
image: 'bitnami/redis:6.2'
networks:
- redis-bridge
container_name: redis-node2
ports:
- '6382:6379'
depends_on:
- redis-node1
environment:
- REDIS_REPLICATION_MODE=slave
- REDIS_MASTER_HOST=redis-node1
- REDIS_MASTER_PORT_NUMBER=6379
- REDIS_MASTER_PASSWORD=abcd123456
- REDIS_PASSWORD=abcd123456
- REDIS_REPLICA_IP=192.168.2.226
- REDIS_REPLICA_PORT=6382
- TZ=Asia/Shanghai
volumes:
- '/home/rediscluster/data/node2:/bitnami'
redis-node3:
image: 'bitnami/redis:6.2'
networks:
- redis-bridge
container_name: redis-node3
ports:
- '6383:6379'
depends_on:
- redis-node1
environment:
- REDIS_REPLICATION_MODE=slave
- REDIS_MASTER_HOST=redis-node1
- REDIS_MASTER_PORT_NUMBER=6379
- REDIS_MASTER_PASSWORD=abcd123456
- REDIS_PASSWORD=abcd123456
- REDIS_REPLICA_IP=192.168.2.226
- REDIS_REPLICA_PORT=6383
- TZ=Asia/Shanghai
volumes:
- '/home/rediscluster/data/node3:/bitnami'
redis-sentinel:
image: 'bitnami/redis-sentinel:6.2'
networks:
- redis-bridge
ports:
- '26381-26383:26379'
depends_on:
- redis-node1
- redis-node2
- redis-node3
environment:
- REDIS_MASTER_PASSWORD=abcd123456
- REDIS_MASTER_HOST=redis-node1
- REDIS_MASTER_SET=mycluster
- REDIS_SENTINEL_PASSWORD=abcd123456
- REDIS_SENTINEL_DOWN_AFTER_MILLISENCONDS=1000
- REDIS_SENTINEL_FAILOVER_TIMEOUT=3000
- TZ=Asia/Shanghai

截图：

启动命令

docker 18之前版本,需要独立安装docker-compose：

docker-compose up --scale redis-sentinel=3 -d

docker 19之后版本，docker compose已经集成到docker中：(注意没有了中划线)

docker compose up --scale redis-sentinel=3 -d

4、Redis Desktop Manager连接集群

4.1、如果仅是查询-可以只连接一台节点（下同）

查看此台服务器的角色：

5、Another Redis Desktop Manager连接集群

此工具，不收费，可以指定集群方式：

Java代码

依赖：

<dependency>
<groupId>redis.clients</groupId>
<artifactId>jedis</artifactId>
<version>4.2.3</version>
</dependency>

主从哨兵结构-生产环境

1、正式服务器redis主从使用内部ip，即192.168.xx.xx。

2、哨兵对外暴露的为广域网ip，即:61.164.xxx.xxx。

3、多机间通讯使用host网络。（可选swarm网络需要先做docker集群）

1、结构

2、配置文件

工作目录：

1. redis-node工作目录：/home/redis-cluster
2. redis-sentinel工作目录：/home/redis-sentinel

1、初始主节点

redis-master启动脚本,主节点不需要指定从机（166)，主节点启动后，建议下线一次，让sentinel进行切换测试。

#!/bin/bash
docker run --name redis-node -d \
--network host \
--restart always \
-e REDIS_PASSWORD=abcd123456 \
-e REDIS_PORT_NUMBER=8379 \
-e REDIS_REPLICATION_MODE=master \
-e REDIS_MASTER_PASSWORD=abcd123456 \
-e REDIS_MASTER_PORT_NUMBER=8379 \
-e REDIS_REPLICA_IP=61.164.242.166 \
-e REDIS_REPLICA_PORT=8379 \
-e TZ="Asia/Shanghai" \
-v /home/redis-cluster/data:/bitnami \
bitnami/redis:6.2

截图：

说明：

参数说明参见bitnami容器官网：

https://hub.docker.com/r/bitnami/redis

2、其他从节点

其他从节点启动脚本：

#!/bin/bash
docker run --name redis-node -d \
--network host \
--restart always \
-e REDIS_PASSWORD=abcd123456 \
-e REDIS_PORT_NUMBER=8379 \
-e REDIS_REPLICATION_MODE=slave \
-e REDIS_MASTER_PASSWORD=abcd123456 \
-e REDIS_MASTER_PORT_NUMBER=8379 \
-e REDIS_REPLICA_IP=61.164.242.187 \
-e REDIS_REPLICA_PORT=8379 \
-e REDIS_MASTER_HOST=192.168.1.102 \
-e TZ="Asia/Shanghai" \
-v /home/redis-cluster/data:/bitnami \
bitnami/redis:6.2

截图：

所有哨兵

#!/bin/bash
docker run --name redis-sentinel -d \
--network host \
--restart always \
-e REDIS_MASTER_HOST=192.168.1.102 \
-e REDIS_MASTER_PORT_NUMBER=8379 \
-e REDIS_MASTER_SET=mycluster \
-e REDIS_MASTER_PASSWORD=abcd123456 \
-e REDIS_SENTINEL_QUORUM=2 \
-e REDIS_SENTINEL_PASSWORD=abcd123456 \
-e REDIS_SENTINEL_DOWN_AFTER_MILLISECONDS=1000 \
-e REDIS_SENTINEL_FAILOVER_TIMEOUT=3000 \
-e REDIS_SENTINEL_ANNOUNCE_IP=192.168.1.103 \
-e REDIS_SENTINEL_PORT_NUMBER=26379 \
-e REDIS_SENTINEL_ANNOUNCE_PORT=26379 \
bitnami/redis-sentinel:6.2

截图：

参数说明：

https://hub.docker.com/r/bitnami/redis-sentinel

除根据不同IP设置：REDIS_SENTINEL_ANNOUNCE_IP外，其他配置完全一样。

3、连接

使用ARDM:

使用RDM:

4、Java连接测试

5、注意-使用公网IP太慢

以下进行调整。

3、正式服务器调优

原理：sentinel类似于一个网关，请求sentinel它会返回一个可用的写redis的连接，此后的Read/Write都使用这一个连接（见JedieSentinelPool源代码）。

1、调优规则

正式服务器切换为内网通讯，所以原所有服务器开放的26379端口可以关闭了。

调优化设置，传递内网IP：

修改redis启动配置文件：

redis sentinel启动配置文件，保持不变。

关闭原所有主机对外暴露的23679端口,所有主机执行：

ufw delete allow 26379

2、Java代码连接

注意，此连接在运行后，只能在正式服务器上运行，不支持远程调试，如果需要远程连接，请连接测试服务器：

配置：

redis.sentinels=192.168.1.102:26379,192.168.1.103:26379,192.168.1.104:26379

工具类：

测试：

测试调用：

root@server188:~/temp# curl localhost:38877/test/run

success

root@server188:~/temp# curl localhost:38877/test/run?times=2000

success

root@server188:~/temp#

结果：这个速度还是可以的：

3、远程连接

如果只是读取，则可以连接任意一台没有宕机的redis:

如要进行写操作，则必须要连接可写操作的redis,即以下是master的才可以进行写操作：

以下主机可以执行写操作：