redis 部署哨兵、cluster 集群

本贴最后更新于 1946 天前,其中的信息可能已经时移世异

生产环境,如果你是单机在线上跑的话,那么风险很大,一般情况下都会使用一主多从的架构,这样你的系统的可用性才能达到 4 个 9 。

今天来讲讲如何部署读写分离架构,以及读写分离如何保证高可用?

假设你已经部署了 2 个 redis,如果不知道怎么安装部署,可以看看这篇文章:redis 生产环境安装

选择其中一个 redis 节点,作为 slave 节点,需要修改 redis.conf 文件;找到 slaveof 属性,设置 master 的 ip 和端口,这样主从架构就配置好了。
配置如下:

slaveof master-ip 6379

bind 当前机器的ip地址

slave-read-only yes

masterauth xxxx  #注意:如果你master设置了requirepass,那么slave中需要配置下面这个配置

配置完之后,使用“redis-cli -h ip -p 6379 -a 你的密码”连上去,输入:info,可以看到主从配置信息
imagepng
这个 redis 的 role 是 master。

imagepng
这个 redis 的 role 是 slave。

也可以使用 slaveof 命令,
imagepng
关闭 slave
imagepng
利用『 SLAVEOF NO ONE 不会丢弃同步所得数据集』这个特性,可以在主服务器失败的时候,将从属服务器用作新的主服务器,从而实现无间断运行。

到此主从架构的配置就好了。
但是如果某些原因,master 挂了,那么需要手动来把 slave 变成 master。幸好 redis 提供了 Sentinel(哨兵集群),可以不用人工介入就进行切换。使用该机制才能保证 4 个 9 。

sentinel 配置

首先 cd 到 redis 下面,找到 sentinel.conf 文件,把他 cp 到/etc/sentinal/目录下,并且命名为 5000.conf(表示端口为 5000)
mkdir /etc/sentinal
mkdir -p /var/sentinal/5000
cd /usr/local/redis
cp sentinel.conf /etc/sentinal
mv sentinel.conf 5000.conf

修改 5000.conf 的配置为

port 5000 
dir /var/sentinal/5000 
bind xxxx #指定你的ip地址

sentinel monitor mymaster 你的ip 6379 2  #哨兵监控的master。
quorum的解释:至少多少个哨兵要一致同意,master进程挂掉了,或者slave进程挂掉了,或者要启动一个故障转移操作

sentinel down-after-milliseconds mymaster 30000  #超过多少毫秒跟一个redis实例断了连接,哨兵就可能认为这个redis实例挂了

sentinel failover-timeout mymaster 60000 #若哨兵在配置值内未能完成故障转移操作,则任务本次故障转移失败。

sentinel parallel-syncs mymaster 1 #新的master被切换之后,同时有多少个slave被切换到去连接新master,重新做同步,数字越低,花费的时间越多

protected-mode no #保护模式如果开启只接受回环地址的ipv4和ipv6地址链接,拒绝外部链接,而且正常应该配置多个哨兵,避免一个哨兵出现独裁情况,如果配置多个哨兵那如果开启也会拒绝其他sentinel的连接。导致哨兵配置无法生效。

sentinel auth-pass mymaster redismasterpassword #如果你的redis设置了密码,那么你需要在这里配置密码 

logfile /var/sentina/logs/sentinel.log      #指明日志文件

使用 redis-sentinel /etc/sentinal/5000.conf 来启动哨兵。
看到下面结果,表示哨兵配置成功了。
imagepng

可以使用下面这个命令,连上 sentinal,查看具体信息
redis-cli -h 你的 sentinal-ip -p 你的 sentinal-port

sentinel master mymaster #查看redis master的信息
SENTINEL slaves mymaster #查看redis slave的信息
SENTINEL sentinels mymaster #查看其它的sentinal信息
SENTINEL get-master-addr-by-name mymaster #查看谁是master redis

如果你把 master 关掉,哨兵就会自动帮你切换。
模拟把 master redis 关掉,哨兵切换过程如下图
imagepng
再次查看当前主从架构的 master
imagepng
已经切换为 6380 了(之前的 master 是 6379)

redis cluster 配置

一般配置 3 个 master,每个 master 下面配置一个 salve。这样的配置可以保证系统高可用。如果你想你的更加稳定,那么可以在 master 下面都配置一些 salve。

使用下面命令 创建文件夹
mkdir -p /etc/redis-cluster
mkdir -p /var/log/redis
mkdir -p /var/redis/6379

redis.conf 文件的配置为:

port 6379
cluster-enabled yes
cluster-config-file /etc/redis-cluster/node-6379.conf #这是指定一个文件,供cluster模式下的redis实例将集群状态保存在那里,包括集群中其他机器的信息,比如节点的上线和下限,故障转移。
cluster-node-timeout 15000  #节点存活超时时长,超过一定时长,认为节点宕机,master宕机的话就会触发主备切换,slave宕机就不会提供服务
daemonize	yes							
pidfile		/var/run/redis\_6379.pid 						
dir 		/var/redis/6379
logfile /var/log/redis/6379.log
bind 你的ip地址		
appendonly yes

redis 配置好了之后,就可以启动了

还需要安装 ruby

yum install -y ruby
yum install -y rubygems
gem install -l /home/downloads/redis-3.2.1.gem #去官网 https://rubygems.org/gems/redis 下载相应的.gem 文件,上传到服务器上
cp /usr/local/redis-3.2.8/src/redis-trib.rb /usr/local/bin

使用下面命令来创建集群
redis-trib.rb create --replicas 0 xxx:6379 xxx:6380 xxx:6381

出现了错误:
1、Either the node already knows other nodes (check with CLUSTER NODES) or contains some key in database 0
解决:把 dump.db 数据清除掉。

2、[ERR] Sorry, can't connect to node
解决:因为一个节点我设置了密码,所以导致 redis-trib.rb 连接不上。requirepass 注释掉。

3、ERROR: Invalid configuration for cluster creation.Redis Cluster requires at least 3 master nodes.
解决:因为之前我配置了两个节点,他创建集群必须要 3 个节点,那么在创建一个节点。

如果你看到这个,说明你已经成功配置了 redis cluster
imagepng

  • B3log

    B3log 是一个开源组织,名字来源于“Bulletin Board Blog”缩写,目标是将独立博客与论坛结合,形成一种新的网络社区体验,详细请看 B3log 构思。目前 B3log 已经开源了多款产品:SymSoloVditor思源笔记

    1083 引用 • 3461 回帖 • 286 关注
  • Redis

    Redis 是一个开源的使用 ANSI C 语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value 数据库,并提供多种语言的 API。从 2010 年 3 月 15 日起,Redis 的开发工作由 VMware 主持。从 2013 年 5 月开始,Redis 的开发由 Pivotal 赞助。

    284 引用 • 247 回帖 • 175 关注

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...
chaigx
欢迎关注我的公众号:程序之声。有些文章没办法同步过来,访问个人博客:http://www.chaiguanxin.com 杭州

推荐标签 标签

  • Linux

    Linux 是一套免费使用和自由传播的类 Unix 操作系统,是一个基于 POSIX 和 Unix 的多用户、多任务、支持多线程和多 CPU 的操作系统。它能运行主要的 Unix 工具软件、应用程序和网络协议,并支持 32 位和 64 位硬件。Linux 继承了 Unix 以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。

    915 引用 • 931 回帖
  • IDEA

    IDEA 全称 IntelliJ IDEA,是一款 Java 语言开发的集成环境,在业界被公认为最好的 Java 开发工具之一。IDEA 是 JetBrains 公司的产品,这家公司总部位于捷克共和国的首都布拉格,开发人员以严谨著称的东欧程序员为主。

    180 引用 • 400 回帖
  • OAuth

    OAuth 协议为用户资源的授权提供了一个安全的、开放而又简易的标准。与以往的授权方式不同之处是 oAuth 的授权不会使第三方触及到用户的帐号信息(如用户名与密码),即第三方无需使用用户的用户名与密码就可以申请获得该用户资源的授权,因此 oAuth 是安全的。oAuth 是 Open Authorization 的简写。

    36 引用 • 103 回帖 • 10 关注
  • Elasticsearch

    Elasticsearch 是一个基于 Lucene 的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于 RESTful 接口。Elasticsearch 是用 Java 开发的,并作为 Apache 许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。

    116 引用 • 99 回帖 • 269 关注
  • CSDN

    CSDN (Chinese Software Developer Network) 创立于 1999 年,是中国的 IT 社区和服务平台,为中国的软件开发者和 IT 从业者提供知识传播、职业发展、软件开发等全生命周期服务,满足他们在职业发展中学习及共享知识和信息、建立职业发展社交圈、通过软件开发实现技术商业化等刚性需求。

    14 引用 • 155 回帖 • 1 关注
  • PHP

    PHP(Hypertext Preprocessor)是一种开源脚本语言。语法吸收了 C 语言、 Java 和 Perl 的特点,主要适用于 Web 开发领域,据说是世界上最好的编程语言。

    164 引用 • 407 回帖 • 527 关注
  • RIP

    愿逝者安息!

    8 引用 • 92 回帖 • 291 关注
  • Logseq

    Logseq 是一个隐私优先、开源的知识库工具。

    Logseq is a joyful, open-source outliner that works on top of local plain-text Markdown and Org-mode files. Use it to write, organize and share your thoughts, keep your to-do list, and build your own digital garden.

    4 引用 • 55 回帖 • 8 关注
  • 快应用

    快应用 是基于手机硬件平台的新型应用形态;标准是由主流手机厂商组成的快应用联盟联合制定;快应用标准的诞生将在研发接口、能力接入、开发者服务等层面建设标准平台;以平台化的生态模式对个人开发者和企业开发者全品类开放。

    15 引用 • 127 回帖 • 2 关注
  • TGIF

    Thank God It's Friday! 感谢老天,总算到星期五啦!

    284 引用 • 4481 回帖 • 654 关注
  • 禅道

    禅道是一款国产的开源项目管理软件,她的核心管理思想基于敏捷方法 scrum,内置了产品管理和项目管理,同时又根据国内研发现状补充了测试管理、计划管理、发布管理、文档管理、事务管理等功能,在一个软件中就可以将软件研发中的需求、任务、bug、用例、计划、发布等要素有序的跟踪管理起来,完整地覆盖了项目管理的核心流程。

    5 引用 • 15 回帖 • 222 关注
  • 音乐

    你听到信仰的声音了么?

    59 引用 • 509 回帖
  • 以太坊

    以太坊(Ethereum)并不是一个机构,而是一款能够在区块链上实现智能合约、开源的底层系统。以太坊是一个平台和一种编程语言 Solidity,使开发人员能够建立和发布下一代去中心化应用。 以太坊可以用来编程、分散、担保和交易任何事物:投票、域名、金融交易所、众筹、公司管理、合同和知识产权等等。

    34 引用 • 367 回帖 • 2 关注
  • 创造

    你创造的作品可能会帮助到很多人,如果是开源项目的话就更赞了!

    173 引用 • 990 回帖
  • Flutter

    Flutter 是谷歌的移动 UI 框架,可以快速在 iOS 和 Android 上构建高质量的原生用户界面。 Flutter 可以与现有的代码一起工作,它正在被越来越多的开发者和组织使用,并且 Flutter 是完全免费、开源的。

    39 引用 • 92 回帖 • 8 关注
  • uTools

    uTools 是一个极简、插件化、跨平台的现代桌面软件。通过自由选配丰富的插件,打造你得心应手的工具集合。

    5 引用 • 13 回帖
  • JSON

    JSON (JavaScript Object Notation)是一种轻量级的数据交换格式。易于人类阅读和编写。同时也易于机器解析和生成。

    51 引用 • 190 回帖 • 1 关注
  • 微信

    腾讯公司 2011 年 1 月 21 日推出的一款手机通讯软件。用户可以通过摇一摇、搜索号码、扫描二维码等添加好友和关注公众平台,同时可以将自己看到的精彩内容分享到微信朋友圈。

    129 引用 • 793 回帖 • 2 关注
  • Unity

    Unity 是由 Unity Technologies 开发的一个让开发者可以轻松创建诸如 2D、3D 多平台的综合型游戏开发工具,是一个全面整合的专业游戏引擎。

    25 引用 • 7 回帖 • 246 关注
  • BookxNote

    BookxNote 是一款全新的电子书学习工具,助力您的学习与思考,让您的大脑更高效的记忆。

    笔记整理交给我,一心只读圣贤书。

    1 引用 • 1 回帖
  • JetBrains

    JetBrains 是一家捷克的软件开发公司,该公司位于捷克的布拉格,并在俄国的圣彼得堡及美国麻州波士顿都设有办公室,该公司最为人所熟知的产品是 Java 编程语言开发撰写时所用的集成开发环境:IntelliJ IDEA

    18 引用 • 54 回帖 • 1 关注
  • PWA

    PWA(Progressive Web App)是 Google 在 2015 年提出、2016 年 6 月开始推广的项目。它结合了一系列现代 Web 技术,在网页应用中实现和原生应用相近的用户体验。

    14 引用 • 69 回帖 • 132 关注
  • 区块链

    区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。所谓共识机制是区块链系统中实现不同节点之间建立信任、获取权益的数学算法 。

    91 引用 • 751 回帖 • 1 关注
  • Eclipse

    Eclipse 是一个开放源代码的、基于 Java 的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。

    75 引用 • 258 回帖 • 627 关注
  • Git

    Git 是 Linux Torvalds 为了帮助管理 Linux 内核开发而开发的一个开放源码的版本控制软件。

    205 引用 • 357 回帖 • 1 关注
  • Rust

    Rust 是一门赋予每个人构建可靠且高效软件能力的语言。Rust 由 Mozilla 开发,最早发布于 2014 年 9 月。

    57 引用 • 22 回帖 • 5 关注
  • TensorFlow

    TensorFlow 是一个采用数据流图(data flow graphs),用于数值计算的开源软件库。节点(Nodes)在图中表示数学操作,图中的线(edges)则表示在节点间相互联系的多维数据数组,即张量(tensor)。

    20 引用 • 19 回帖