Docker Redis哨兵、集群部署详解

  • Post author:
  • Post category:其他




1.引言

在实际生产环境当中,缓存时支撑系统业务高效运行的重要基础设施。缓存的可靠性和可用性至关重要,本章利用Docker+docker-compose+Redis以实现单机版的Redis哨兵模式集群部署,阅读本章需要前置了解Docker容器和Redis哨兵模式的相关知识。



2.Redis主从复制



2.1容器编排

完成主从复制、以支撑读写分离(写:主,读:从)

version: '3'
services:
  master:
    image: redis
    container_name: redis-master
    command: redis-server --requirepass 123456
    ports:
      - "6379:6379"
    networks:
      sentinel-master:
        ipv4_address: 172.33.1.0
  slave1:
    image: redis
    container_name: redis-slave-1
    ports:
      - "6380:6379"
    command: redis-server --slaveof redis-master 6379 --requirepass 123456 --masterauth 123456 
    depends_on:
      - master
    networks:
      sentinel-master:
        ipv4_address: 172.33.1.1
  slave2:
    image: redis
    container_name: redis-slave-2
    ports:
      - "6381:6379"
    command: redis-server --slaveof redis-master 6379 --requirepass 123456 --masterauth 123456
    depends_on:
      - master
    networks:
      sentinel-master:
        ipv4_address: 172.33.1.2
networks:
  sentinel-master:
    name: redis_sentinel-master
    driver: bridge
    ipam:
      config:
        - subnet: 172.33.0.0/16



2.2主从测试

主机断开连接,从机依旧连接主机,但没有写操作直到主机重新连接

第一次连接主机,从机发送sync同步命令,master接收命令,启动后台存盘经常,同时收集所有接收到的用于修改数据集的命令,在后台进程执行完毕之后,master将传送整个数据文件到slave,完成一次全量复制

  • 全量复制:slave接收到数据库文件数据后,将其存盘并加载到内存中
  • 增量复制:master继续将新的所有收集到的修改命令依次传给slave,完成同步
  • 重新连接会触发全量复制

注意:非docker安装的情况下,需要对配置文件进行持久化操作,命令行进行的主从配置重启时会刷新



2.3测试网络

查看网络配置:docker inspect sentinel-master

容器网络测试:

  • apt-get update
  • apt-get install iputils-ping
  • ping slave2
  • ping slave1



3.Redis哨兵集群



3.1 容器编排

version: '2'
services:
  sentinel1:
    image: redis
    container_name: redis-sentinel-1
    ports:
      - "26379:26379"
    command: redis-sentinel /usr/local/etc/redis/sentinel.conf
    volumes:
      - "./conf/sentinel.conf:/usr/local/etc/redis/sentinel.conf"
  sentinel2:
    image: redis
    container_name: redis-sentinel-2
    ports:
      - "26380:26379"
    command: redis-sentinel /usr/local/etc/redis/sentinel.conf
    volumes:
      - "./conf/sentinel2.conf:/usr/local/etc/redis/sentinel.conf"
  sentinel3:
    image: redis
    container_name: redis-sentinel-3
    ports:
      - "26381:26379"
    command: redis-sentinel /usr/local/etc/redis/sentinel.conf
    volumes:
      - "./conf/sentinel3.conf:/usr/local/etc/redis/sentinel.conf"
networks:
  default:
    external:
      name: redis_sentinel-master



3.2 编写哨兵配置文件

分别命名sentinel.conf、sentinel2.conf、sentinel3.conf

port 26379
dir /tmp
sentinel monitor mymaster 172.33.1.0 6379 2
sentinel auth-pass mymaster 123456 
sentinel down-after-milliseconds mymaster 30000
sentinel parallel-syncs mymaster 1
sentinel failover-timeout mymaster 10000  
sentinel deny-scripts-reconfig yes


注意:

  • 配置了静态ip,无需修改任何配置
  • 两票认为master宕机即进行选举:sentinel monitor mymaster 172.33.1.0 6379 2



3.3 测试

  • 查看实例:docker ps

    在这里插入图片描述
  • 查看dockernet:docker inspact redis_sentinel-master

    在这里插入图片描述



4.Redis测试集群



4.1 测试步骤

进入哨兵节点:

  • docker exec -it redis-sentinel-1 bash
  • redis-cli -p 26379
  • sentinel master mymaster

    在这里插入图片描述

关闭主节点、测试主从切换:

  • docker kill redis-master
  • sentinel master mymaster

    在这里插入图片描述

验证:

  • 主节点已自动切换、ip切换
  • 主节点重启不会直接作为主机



4.2 优缺点分析

优点:

  • 哨兵集群,基于主从复制模式,兼又其有点
  • 自动切换,对故障进行转移,可用性更佳
  • 架构更健壮

    缺点:
  • 不易在线扩容
  • 哨兵配置较为复杂



5.Redis问题扩展



5.1 缓存穿透

大量发起redis中未缓存的数据,照成对mysql的大量查询,即缓存穿透。

解决方法:

  • 可用通过布隆过滤器对请求数据进行过滤
  • 设置缓存空对象



5.2 缓存击穿

热点key过期导致的大量直接对mysql的访问。

解决方法:

  • 对热点数据进行过期延时设置
  • 加分布式锁,对同一个key同时只能一个线程查询



5.3 缓存雪崩

缓存集中过期或宕机导致的大量对mysql的不同数据查询

解决方法:

  • 保障redis高可用(集群)
  • 限流降级
  • 数据预热



5.4 分布式锁

阿里:redission



6.参考资料

https://blog.csdn.net/qq_39211866/article/details/88044546



版权声明:本文为weixin_53083143原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。