docker - 连接到在 Docker 容器中以哨兵模式运行的 Redis 主节点时出现问题

Question

我在 docker 容器中运行 redis，我正在使用 redis sentinel 模式。我已经设置了以下配置 -

3 redis sentinels nodes
1 redis master node
2 redis slave nodes

我在我的本地机器上运行所有这些。所以总共有 6 个 docker 容器通过 docker-compose 以桥接网络模式运行。所有容器都有到外部的端口映射。

所有容器都可以相互访问，因为它们位于 docker-compose up 运行期间创建的同一个桥接 docker 网络中。

我已经使用 Redisson 库创建了一个 Java 客户端来访问 redis。配置客户端使用 redis-sentinel 模式如下 -

Config config = new Config();
config.useSentinelServers()
       .setMasterName("redis-master")
       .addSentinelAddress("redis://127.0.0.1:26379")
       .addSentinelAddress("redis://127.0.0.1:26380")
       .addSentinelAddress("redis://127.0.0.1:26381")

RedissonClient client = Redisson.create(config);

这就是我面临的问题。每当我尝试通过此客户端在 redis 上运行一些命令时，请求都会通过哨兵节点，这会为我提供当前的 redis 主节点地址。但是我的 java 客户端无法直接与 redis master 通信，因为 sentinel 节点返回的 ip 是主节点的内部 docker 网络 ip，无法在 docker 网络外部访问，并且它失败并出现类似的异常，如下所示 -

Exception in thread "main" org.redisson.client.RedisConnectionException: Unable to connect to Redis server: 172.21.0.2/172.21.0.2:6379
    at org.redisson.connection.pool.ConnectionPool$2$1.operationComplete(ConnectionPool.java:161)
    at io.netty.util.concurrent.DefaultPromise.notifyListener0(DefaultPromise.java:511)

如何解决这个问题？我需要在一些不同的网络模式下运行它吗？或者以某种方式将此内部 docker ip 转换为运行 docker 容器的机器的实际 ip？

Answer 1

我今天也遇到了这个问题，试图为测试实例设置这个。我的初始撰写文件基于 https://blog.alexseifert.com/2016/11/14/using-redis-sentinel-with-docker-compose/进行修改以满足我的需要。我能够通过以下方式找到解决方法:1) 将端口绑定(bind)到我的主机，2) 在 docker-compose 中设置 depends_on 标志，以及 3) 将我的 sentinel.conf 设置为指向我的主机运行的主机名: https://docs.docker.com/compose/startup-order/

有点难以解释，但我会尽力而为:你的主/副本在 docker-compose 中看起来像这样:

  redis-master:
    image: redis:5.0.4-alpine
    volumes:
      - <mounted-data-directory>
      - "<local-master-config-directory>/redis.conf:/usr/local/etc/redis/redis.conf"
    ports:
      - "6379:6379"
    command:
      - redis-server
      - /usr/local/etc/redis/redis.conf

  redis-replica:
    image: redis:5.0.4-alpine
    links:
      - redis-master
    volumes:
      - <mounted-data-directory>
      - "<local-replica-config-directory>:/usr/local/etc/redis/redis.conf"
    ports:
      - "6380:6380"
    depends_on:
      - redis-master
    command:
      - redis-server
      - /usr/local/etc/redis/redis.conf
      - --slaveof redis-master 6379

对于我的哨兵，我给了每个 Dockerfile 和一个 sentinel.conf(每个都有不同的端口): docker 文件:

FROM redis:5.0.4-alpine
RUN mkdir -p /redis
WORKDIR /redis
COPY sentinel.conf .
RUN chown redis:redis /redis/*
ENTRYPOINT ["redis-server", "/redis/sentinel.conf", "--sentinel"]

哨兵.conf

port 26379
dir /tmp
bind 0.0.0.0
sentinel monitor mymaster <hostname> 6379 2
sentinel down-after-milliseconds mymaster 1000
sentinel parallel-syncs mymaster 1
sentinel failover-timeout mymaster 10000

值得注意的是，我尝试使用 127.0.0.1 和 localhost 执行此操作，但我认为两者都不起作用，所以我在运行它的机器上设置了主机名。那时我有点想尝试任何事情。

每个哨兵(我有三个)都有一个单独的条目引用它们的构建上下文并将 sentinel.conf 中的端口映射到本地端口。所以在 docker-compose 中，我的哨兵看起来像这样:

 # Instance 1
  redis-sentinel:
    build:
      context: <path-to-context>
    links:
      - redis-master
    ports:
      - "26379:26379"
    depends_on:
      - redis-replica

我所做的绝对是 hack，我不会在生产中这样做。我很确定有一个更好的 docker 网络解决方案，我只是不想为我需要测试的东西走得太远。希望这会有所帮助。