RabbitMQ 集群与高可用配置

本贴最后更新于 584 天前,其中的信息可能已经时异事殊

集群概述

通过 Erlang 的分布式特性(通过 magic cookie 认证节点)进行 RabbitMQ 集群,各 RabbitMQ 服务为对等节点,即每个节点都提供服务给客户端连接,进行消息发送与接收。
 
这些节点通过 RabbitMQ HA 队列(镜像队列)进行消息队列结构复制。本方案中搭建 3 个节点,并且都是磁盘节点(所有节点状态保持一致,节点完全对等),只要有任何一个节点能够工作,RabbitMQ 集群对外就能提供服务。

环境

  • CentOS 6.4,64位
  • RabbitMQ 3.1.5
  • HAProxy 1.4.22
 
RabbitMQ 集群安装在 3 个节点上:192.168.1.1、192.168.1.2、192.168.1.3;
HAProxy 安装在 192.168.1.4 上,用于对外提供 RabbitMQ 均衡。
 
所需安装包 下载

配置步骤

1. 安装 erlang、rabbitmq
在 192.168.1.1、192.168.1.2、192.168.1.3 三个节点上安装,然后开启 RabbitMQ 监控插件:
rabbitmq-plugins enable rabbitmq_management
2. 修改 /etc/hosts
加入集群 3 个节点的描述:
192.168.1.1 node1
192.168.1.2 node2
192.168.1.3 node3
 
3. 设置 Erlang Cookie
Erlang Cookie 文件:/var/lib/rabbitmq/.erlang.cookie。这里将 node1 的该文件复制到 node2、node3,由于这个文件权限是 400,所以需要先修改 node2、node3 中的该文件权限为 777:
# chmod 777 /var/lib/rabbitmq/.erlang.cookie
然后将 node1 中的该文件拷贝到 node2、node3,最后将权限和所属用户/组修改回来:
# chmod 400 /var/lib/rabbitmq/.erlang.cookie
# chown rabbitmq /var/lib/rabbitmq/.erlang.cookie
# chgrp rabbitmq /var/lib/rabbitmq/.erlang.cookie
 
4. 使用 -detached 参数运行各节点
# rabbitmqctl stop
# rabbitmq-server -detached
 
5. 组成集群
将 node2、node3 与 node1 组成集群:
 
node2 # rabbitmqctl stop_app 
node2 # rabbitmqctl join_cluster rabbit@node1
node2 # rabbitmqctl start_app

node3 # rabbitmqctl stop_app
node3 # rabbitmqctl join_cluster rabbit@node1
node3 # rabbitmqctl start_app

 
此时 node2 与 node3 也会自动建立连接;如果要使用内存节点,则可以使用
node2 # rabbitmqctl join_cluster --ram rabbit@node1 加入集群。
 
集群配置好后,可以在 RabbitMQ 任意节点上执行 rabbitmqctl cluster_status 来查看是否集群配置成功。
 
6. 设置镜像队列策略
在任意一个节点上执行:
# rabbitmqctl set_policy ha-all "^" '{"ha-mode":"all"}'
将所有队列设置为镜像队列,即队列会被复制到各个节点,各个节点状态保持一直。
 
完成这 6 个步骤后,RabbitMQ 高可用集群就已经搭建好了,最后一个步骤就是搭建均衡器。
 
7. 安装并配置 HAProxy
在 192.168.1.4 上安装 HAProxy,然后修改 /etc/haproxy/haproxy.cfg:
 
listen rabbitmq_cluster 0.0.0.0:5672

mode tcp
balance roundrobin

server node1 192.168.1.1:5672 check inter 2000 rise 2 fall 3
server node2 192.168.1.2:5672 check inter 2000 rise 2 fall 3
server node2 192.168.1.3:5672 check inter 2000 rise 2 fall 3

  • RabbitMQ

    RabbitMQ 是一个开源的 AMQP 实现,服务器端用 Erlang 语言编写,支持多种语言客户端,如:Python、Ruby、.NET、Java、C、PHP、ActionScript 等。用于在分布式系统中存储转发消息,在易用性、扩展性、高可用性等方面表现不俗。

    42 引用 • 60 回帖 • 530 关注
  • 集群
    27 引用 • 65 回帖
  • 高可用
    5 引用 • 16 回帖
  • 消息队列
    33 引用 • 42 回帖 • 2 关注

赞助商 我要投放

8 回帖
请输入回帖内容 ...
  • someone
    1. 使用 -detached 参数运行各节点
      # rabbitmqctl stop
      # rabbitmq-server -detached

      上面命令,在哪个节点执行呢,总是添加集群出错
  • someone

    @xiaoxu 在各个节点上运行。另外,现在的 rabbitmq 不知道还是不是这个套路,你最好参考一下官方文档 :)

  • someone

    谢谢,兄弟的回复。我看了官网,是每个节点执行
    请问,你在 CentOS7 上部署过 cluster+ha 吗?最近,我总是部署错误。资料又太少了。谢谢你

  • someone

    777 的权限,好吧。。。

  • leifeng

    没事来社区玩玩

  • An

    D 这是在干运维了么

  • someone

    我也遇到相同的问题,请问下你的问题解决了吗,在线等

  • someone

    我也遇到相同的问题,不能够部署集群,请问下你的问题解决了吗?

请输入回帖内容 ...