分享web开发知识

注册/登录|最近发布|今日推荐

主页 IT知识网页技术软件开发前端开发代码编程运营维护技术分享教程案例
当前位置:首页 > 运营维护

千万PV网站架构之RabbitMQ(消息队列)安装、集群

发布时间:2023-09-06 02:20责任编辑:苏小强关键词:消息队列网站架构
RabbitMQ介绍:
  • MQ全称为Message Queue, 消息队列(MQ)是一种应用程序对应用程序的通信方法。应用程序通过读写出入队列的消息(针对应用程序的数据)来通信,而无需专用连接来链接它们。消息传递指的是程序之间通过在消息中发送数据进行通信,而不是通过直接调用彼此来通信,直接调用通常是用于诸如远程过程调用的技术。排队指的是应用程序通过 队列来通信。队列的使用除去了接收和发送应用程序同时执行的要求。
  • RabbitMQ是一个在AMQP基础上完成的,可复用的企业消息系统。他遵循Mozilla Public License开源协议。

RabbitMQ几个关键概念:

  • Broker:简单来说就是消息队列服务器实体。
  • Exchange:消息交换机,它指定消息按什么规则,路由到哪个队列。
  • Queue:消息队列载体,每个消息都会被投入到一个或多个队列。
  • Binding:绑定,它的作用就是把exchange和queue按照路由规则绑定起来。
  • Routing Key:路由关键字,exchange根据这个关键字进行消息投递。
  • vhost:虚拟主机,一个broker里可以开设多个vhost,用作不同用户的权限分离。
  • producer:消息生产者,就是投递消息的程序。
  • consumer:消息消费者,就是接受消息的程序。
  • channel:消息通道,在客户端的每个连接里,可建立多个channel,每个channel代表一个会话任务。
    结构示意图:

    消息队列的使用过程如下:

    1.客户端连接到消息队列服务器,打开一个channel;2.客户端声明一个Exchange,并设置相关属性;3.客户端声明一个Queue,并设置相关属性;4.客户端使用Routing Key,在Exchange和Queue之间建立好绑定关系;5.客户端投递消息到Exchange;6.Exchange收到消息后,就根据消息的Key和已经设置的Binding,进行消息路由,将消息投递到一个或多个队列里;

    RabbitMQ的集群节点包括内存节点,磁盘节点。RabbitMQ支持的持久化,也就是数据写在磁盘上,最合适的方案就是既有内存节点,又有磁盘节点;
    实现步骤:

  • 设计架构模式:在一个集群里,有三台服务器,其中一台使用磁盘模式,另两台使用内存模式。两台内存模式的节点无疑速度很快,因此通过客户端连接访问它们。但是客户端不可能分别连接两个内存节点,肯定是通过前端反向代理去轮询分发请求。如果担心前端反向代理服务器故障,可以通过keepalived软件做一个高可用架构。而磁盘模式的节点,由于磁盘IO相对较慢,因此仅作数据备份使用;
  • 环境准备:
主机名操作系统IP地址防火墙和SELinux用途
rabbitmq01CentOS7192.168.72.128关闭磁盘节点
rabbitmq02CentOS7192.168.72.150关闭内存节点
rabbitmq03CentOS7192.168.72.151关闭内存节点

安装RabbitMQ:

* 需要配置三个节点的hosts文件,将如下的内容分别加入到三台服务器上。* vim /etc/hostname ??????????//其他两台为rabbitmq02、rabbitmq03 ???rabbitmq01.localdomain* vim /etc/hosts ??????//添加下面三行192.168.72.128 rabbitmq01192.168.72.150 rabbitmq02192.168.72.151 rabbitmq03* init 6 ???//重启* systemctl stop firewalld.service * setenforce 0
* 三个节点都安装rabbitmq软件:* yum install epel-release -y ????//安装epel源* yum install -y rabbitmq-server ?//安装软件* ln -s /usr/lib/rabbitmq/bin/* /usr/bin/ //创建链接,使系统能够识别RabbitMQ命令* rabbitmq-plugins list ????//查看插件安装情况* rabbitmq-plugins enable rabbitmq_management //启用rabbitmq_management服务* systemctl start rabbitmq-server.service ??//启动rabbitmq服务* netstat -ntap | grep 5672 ???//如图3个端口开启 说明正常(15672,25672都是rabbitmq的管理端口,5672则是和生产者,消费者通信的端口)* rabbitmqctl cluster_status ?//检查三台的集群状态,目前相互独立,没有形成集群。






RabbitMQ的集群是依赖于erlang的集群来工作的,所以必须先构建起erlang的集群环境,在erlang的集群中,各节点是通过一个magic.cookie来实现的,这个cookie存放在/var/lib/rabbitmq/.erlang.cookie中,文件是400的权限。所以必须保证各节点cookie保持一致,否则节点之间就无法通信。

* 构建Erlang群集:* systemctl stop rabbitmq-server.service ??????//停止三台服务器* vi /var/lib/rabbitmq/.erlang.cookie ????????//三台值配置成一样的,复制rabbitmq01的内容到其他两台* systemctl start rabbitmq-server.service



* 在内存节点mq02,mq03上操作,先停掉rabbitmq应用,然后调用cluster命令,组成集群,最后再启动rabbitmq应用:* rabbitmqctl stop_app* rabbitmqctl join_cluster --ram rabbit@rabbitmq01 ???//加入到磁盘节点* rabbitmqctl start_app ???* rabbitmqctl cluster_status //验证集群状态

打开浏览器进入web页面管理:

* 输入:http://192.168.72.128:15672/* 默认用户名:guest 密码:guest
* **添加策略:*** Name:策略名称* Pattern:匹配的规则 * Definition;使用ha-mode模式中的all,也就是同步所有匹配的队列。* Priority:优先级,默认是0,值越大优先级越大。* 最后点击添加Add policy按钮,这样就多了一个策略
* **以下简单增加消息队列:*** Name:队列名称* Durability:队列是否持久化(durable 是支持)* Auto delete:自动删除* Arguments:使用的策略类型* 最后点击Add queue按钮,会出现添加的队列
  • 在创建一个aaa 不填写Arguments值,查看队列消息:
* 添加队列消息:* 2-Persistent:表示持久化,反之上面显示非持久化。* Headers: 随便填写* Properties:点击问号,现在一个ID号* Payload:消息内容


再输入网页可以查看到新添加的 消息对列!

千万PV网站架构之RabbitMQ(消息队列)安装、集群

原文地址:http://blog.51cto.com/13721050/2310145

知识推荐

我的编程学习网——分享web前端后端开发技术知识。 垃圾信息处理邮箱 tousu563@163.com 网站地图
icp备案号 闽ICP备2023006418号-8 不良信息举报平台 互联网安全管理备案 Copyright 2023 www.wodecom.cn All Rights Reserved