47.activemq集群

司广孟 司广孟     2022-08-26     180

关键词:

(声明:本文非EamonSec原创)

  使用ZooKeeper实现的Master-Slave实现方式,是对ActiveMQ进行高可用的一种有效的解决方案,高可用的原理:使用ZooKeeper(集群)注册所有的ActiveMQBroker。只有其中的一个Broker可以对外提供服务(也就是Master节点),其他的Broker处于待机状态,被视为Slave。如果Master因故障而不能提供服务,则利用ZooKeeper的内部选举机制会从Slave中选举出一个Broker充当Master节点,继续对外提供服务。

  

 


官网文档如下:
http://activemq.apache.org/replicated-leveldb-store.html

 

二:部署方案,ActiveMQ集群环境准备:
(1)首先我们下载apache-activemq-5.11.1-bin.tar.gz,到我们的一台主节点上去,然后我们在(192.168.1.111一个节点上实现集群即可)
(2)Zookeeper方案

(3)ActiveMQ方案

2:首先搭建zookeeper环境
3:继续搭建activemq环境
(1)在192.168.1.111节点下,创建/usr/local/activemq-cluster文件夹,解压apache-activemq-5.11.1-bin.tar.gz文件,然后对解压好的文件改名,操作如下:

1 命令:mkdir /usr/local/activemq-cluster
2 命令:cd software/
3 命令:tar -zxvf apache-activemq-5.11.1-bin.tar.gz -C/usr/local/activemq-cluster/
4 命令:cd /usr/local/activemq-cluster/
5 命令:mv apache-activemq-5.11.1/ node1如此操作,再次反复解压apache-activemq-5.11.1-bin.tar.gz文件到/usr/local/activemq-cluster/下,建立node2和node3文件夹

 (2)那我们现在已经解压好了三个mq节点也就是node1、node2、node3,下面我们要做的事情就是更改每个节点不同的配置和端口(由于是在一台机器上实现集群)。

1 修改控制台端口(默认为8161),在mq安装路径下的conf/jetty.xml进行修改即可。(三个节点都要修改,并且端口都不同)
1命令:cd /usr/local/activemq-cluster/node1/conf/
2命令:vim /usr/local/activemq-cluster/node1/conf/jetty.xml

  

  三个节点都需要修改为8161、8162、8163!!!2 集群配置文件修改:我们在mq安装路径下的conf/activemq.xml进行修改其中的持久化适配器,修改其中的bind、zkAddress、hostname、zkPath。然后也需要修改mq的brokerName,并且每个节点名称都必须相同。命令:vim /usr/local/activemq-cluster/node1/conf/activemq.xml

第一处修改:brokerName=”activemq-cluster”(三个节点都需要修改)

第二处修改:先注释掉适配器中的kahadb

   

第三处修改:添加新的leveldb配置如下(三个节点都需要修改,分别是62621,62622,62623)

           <replicatedLevelDB
                directory="${activemq.data}/leveldb"
                replicas="3"
                bind="tcp://0.0.0.0:62622"
                zkAddress="192.168.1.16:2181,192.168.1.17:2181,192.168.1.18:2181"
                hostname="sgm"
                zkPath="/activemq/leveldb-stores"       
           >

           </replicatedLevelDB>

第四处修改:(修改通信的端口,避免冲突)
命令:vim /usr/local/activemq-cluster/node1/conf/activemq.xml,修改这个文件的通信端口号,三个节点都需要修改(51511,51512,51513)

到此为止,我们的activemq集群环境已经搭建完毕!

 

三:测试启动activemq集群:


第一步:启动zookeeper集群,命令:zkServer.sh start
第二步:启动mq集群:顺序启动mq:命令如下:
/usr/local/activemq-cluster/node1/bin/activemq start(关闭stop)
/usr/local/activemq-cluster/node2/bin/activemq start(关闭stop)
/usr/local/activemq-cluster/node3/bin/activemq start(关闭stop)
第三步:查看日志信息:
tail -f /usr/local/activemq-cluster/node1/data/activemq.log
tail -f /usr/local/activemq-cluster/node2/data/activemq.log
tail -f /usr/local/activemq-cluster/node3/data/activemq.log
如果不报错,我们的集群启动成功,可以使用控制台查看!
第四步:集群的brokerUrl配置进行修改即可:
failover:(tcp://192.168.1.111:51511,tcp://192.168.1.111:51512,tcp://192.168.1.111:51513)?Randomize=false
/usr/local/activemq-cluster/node1/bin/activemq stop
/usr/local/activemq-cluster/node2/bin/activemq stop
/usr/local/activemq-cluster/node3/bin/activemq stop
zkServer.sh stop


第四:负载均衡配置如下:


集群1链接集群2:
<networkConnectors>
<networkConnector
uri="static:(tcp://192.168.1.112:51514,tcp://192.168.1.112:51515,tcp://192.168.1.112:51516)"
duplex="false"/>
</networkConnectors>
集群2链接集群1:
<networkConnectors>
<networkConnector
uri="static:(tcp://192.168.1.111:51511,tcp://192.168.1.111:51512,tcp://192.168.1.111:51513)"
duplex="false"/>
</networkConnectors>

集群主要分成三大类(高可用集群,负载均衡集群,科学计算集群)

转自:http://blog.csdn.net/nick_php/article/details/52187905高可用集群(HighAvailabilityCluster)负载均衡集群(LoadBalanceCluster)科学计算集群(HighPerformanceComputingCluster)1、高可用集群(HighAvailabilityCluster)常见的就是2个节点做成的HA集群 查看详情

hdfs集群和yarn集群

Hadoop集群环境搭建(一) 1集群简介HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起HDFS集群:负责海量数据的存储,集群中的角色主要有 NameNode/DataNodeYARN集群:负责海量数据运算时... 查看详情

集群搭建

4.集群搭建4.1HADOOP集群搭建4.1.1集群简介HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起HDFS集群:负责海量数据的存储,集群中的角色主要有NameNode/DataNodeYARN集群:负责海量数据运算时... 查看详情

redis集群搭建

目录1集群2集群架构图3集群细节4集群搭建5.创建集群1.创建集群2.输入yes,表示按照当前这种分配进行创建3.集群创建成功出现如下提示6.查看集群状态1.连接集群加上-c3.添加主节点4.添加从节点5.删除节点6.集群在线分片7.spring... 查看详情

zk集群数据迁移和恢复

参考技术Azk集群数据迁移和恢复一、zk数据迁移,有如下两种方案:1、利用zk集群超过半数仍然可用的特性,比如集群中有5个节点,可以将其中1~2个节点割裂出去,再添加1个新的节点,组成新的集群,以此实现数据迁移;2、直... 查看详情

集群,负载均衡,分布式的区别

转自:http://itsoul.iteye.com/blog/7772121、Linux集群主要分成三大类(高可用集群,负载均衡集群,科学计算集群)(下面只介绍负载均衡集群)负载均衡集群(LoadBalanceCluster)负载均衡集群:集群中所有的节点都处于活动状态,它们分摊系... 查看详情

集群的概念

1、什么是集群2、为什么要用到集群3、集群的类型一、什么是集群集群(cluster)技术是一种较新的技术,通过集群技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益,其任务调度则是集群系统... 查看详情

spark集群管理器介绍

Spark可以运行在各种集群管理器上,并通过集群管理器访问集群中的其他机器。Spark主要有三种集群管理器,如果只是想让spark运行起来,可以采用spark自带的独立集群管理器,采用独立部署的模式;如果是想让Spark部署在其他集... 查看详情

如何为 Kubernetes 集群指定集群名称

】如何为Kubernetes集群指定集群名称【英文标题】:Howtospecifyaclusternameforakubernetescluster【发布时间】:2019-11-3012:30:10【问题描述】:我正在尝试使用Kubeadm初始化Kubernetes集群。我基本上有3个问题。1个大问题和2个“子问题”,如果... 查看详情

分布式缓存技术redis学习系列——redis高级应用(集群搭建集群分区原理集群操作)

...与锁、持久化)》本文我们继续学习redis的高级特性——集群。本文主要内容包括集群搭建、集群分区原理和集群操作的学习。Redis集群简介Redis集群是3.0之后才引入的,在3.0之前,使用哨兵(sentinel 查看详情

集群分布式负载均衡区别与联系

    1、Linux集群主要分成三大类(高可用集群,负载均衡集群,科学计算集群)(下面只介绍负载均衡集群)负载均衡集群(LoadBalanceCluster)负载均衡系统:集群中所有的节点都处于活动状态,它们分摊系统的工作负载... 查看详情

集群(cluster)原理(转)

1、什么是集群集群(cluster)就是一组计算机,他们作为整体向用户提供一组网络资源。这些单个的计算机系统就是集群的节点(node)。一个理想的集群是,用户从不会意识到集群系统底层的节点,在他/她们看来,集群是一个... 查看详情

免费下载全套最新6.linux集群视频教程+教学资料+学习课件+源代码+软件开发工具

6.Linux集群视频教程网盘地址:链接:https://pan.baidu.com/s/1roYoSM0jHqa3PrCfaaaqUQ提取码:41py加公众号获取更多新教程教程目录大纲./6.Linux集群└──集群视频└──视频├──1、集群概念│??├──01、-Linux云计算-集群-集群概述│??│?... 查看详情

红帽436——ha高可用集群之概念

一、集群概念:集群:提高性能,降低成本,提高可扩展性,增强可靠性,任务调度室集群中的核心技术。集群作用:保证业务不断 集群三种网络:业务网络,集群网络,存储网络 二、集群三种类型:HA:高可用集群  ... 查看详情

红帽436——ha高可用集群之概念

一、集群概念:集群:提高性能,降低成本,提高可扩展性,增强可靠性,任务调度室集群中的核心技术。集群作用:保证业务不断 集群三种网络:业务网络,集群网络,存储网络 二、集群三种类型:HA:高可用集群  ... 查看详情

如何从 KMeans 集群中获取集群的名称?

】如何从KMeans集群中获取集群的名称?【英文标题】:HowtogetnamefromtheclusterfromKMeansclustering?【发布时间】:2019-04-0411:39:17【问题描述】:我正在使用Kmeans将过去的交易者数据聚类到集群中。我有10个交易者,我聚集成3个集群。现... 查看详情

HDBSCAN 集群选择

】HDBSCAN集群选择【英文标题】:HDBSCANClusterchoice【发布时间】:2021-02-2713:42:33【问题描述】:我一直在使用HDBSCAN,并根据我的数据拥有数百个集群。我正在尝试选择一些集群组进行进一步分析。寻找具有高集群间距离的集群,... 查看详情

ha集群详细配置和实例

一.集群的介绍二.集群需要的软件三.集群的配置四.实例讲述集群一.集群的介绍集群的概念集群(cluster)技术是一种较新的技术,通过集群技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益... 查看详情