この記事の出典：http：//8rr.co/CHkR
最近、rocketmqの使い方を学び、rocketmqサーバーを構築する必要がありました。この記事では、主にrocketmqの構築プロセスと、このプロセスでステップされたいくつかのピットについて説明します。シンプルさについては、マシンにDocker環境がある場合、必要な手順は3つだけです。
-
githubからプロジェクトをプルします
-
変更したパラメータを、ローカルIPを変更
broker.confbrokerIP1 -
docker-compose.ymlファイルのパスを入力し、docker-compose upコマンドを実行します
序文
まず、「Docker」を使用して環境を構築するため、最初に自分のマシンにDockerをインストールする必要があります。特定のインストールプロセスと公式ドキュメントでのDockerの導入は非常に明確ですhttps://docs.docker.com / get-started /。
RocketMQサーバーを構築したいので、RocketMQサーバーを構築するために何をデプロイする必要があるかを知る必要があります。以下に示すように、RocketMQのアーキテクチャ図があります。図に示されているプロデューサーとコンシューマーは、サーバーとして起動されるため、ビルドする必要はありません。ネームサーバーはレジストリのようなコンポーネントであり、springcloudではEurekaとして簡単に理解できます。その後、ネームサーバーを構築する必要があります。ブローカーはメッセージが実際に処理される場所であり、ビルドする必要もあります。
通常の状況では、上記の2つのコンポーネントを構築すると、メッセージの送受信のニーズを実際に満たすことができます。ただし、通常の状況では、MQのサービスステータス、メッセージの消費、トピックキューの構成などを表示するWeb視覚化プラットフォームも構築する必要があります。ここで使用されますrocketmq-console。また、Dockerを介してインストールされます。
デプロイ
上記のように、3つのコンポーネントをインストールする必要があり、次にこれら3つのコンポーネントが相互に通信できる必要があります。接続情報を構成するために個別に展開するのは面倒なので、ここではdocker-compose構成展開を使用します。
まず、docker-compose.yml構成ファイルを作成する必要があります。ファイルの内容は次のとおりです。
version: '3.5'
services:
rmqnamesrv:
image: foxiswho/rocketmq:server
container_name: rmqnamesrv
ports:
- 9876:9876
volumes:
- ./logs:/opt/logs
- ./store:/opt/store
networks:
rmq:
aliases:
- rmqnamesrv
rmqbroker:
image: foxiswho/rocketmq:broker
container_name: rmqbroker
ports:
- 10909:10909
- 10911:10911
volumes:
- ./logs:/opt/logs
- ./store:/opt/store
- ./conf/broker.conf:/etc/rocketmq/broker.conf
environment:
NAMESRV_ADDR: "rmqnamesrv:9876"
JAVA_OPTS: " -Duser.home=/opt"
JAVA_OPT_EXT: "-server -Xms128m -Xmx128m -Xmn128m"
command: mqbroker -c /etc/rocketmq/broker.conf
depends_on:
- rmqnamesrv
networks:
rmq:
aliases:
- rmqbroker
rmqconsole:
image: styletang/rocketmq-console-ng
container_name: rmqconsole
ports:
- 8080:8080
environment:
JAVA_OPTS: "-Drocketmq.namesrv.addr=rmqnamesrv:9876 -Dcom.rocketmq.sendMessageWithVIPChannel=false"
depends_on:
- rmqnamesrv
networks:
rmq:
aliases:
- rmqconsole
networks:
rmq:
name: rmq
driver: bridge
その後にdocker-compose.yml対応する以下同じレベルの3つのフォルダを作成しconf、logs、store。次に、confフォルダの下にbroker.conf構成ファイルを作成します。すべてのファイルのディレクトリの場所を以下に示します。
docker-compose.yml
conf
- broker.conf
logs
store
次にbroker.conf、構成ファイルの内容を書き込みます
# Licensed to the Apache Software Foundation (ASF) under one or more
# contributor license agreements. See the NOTICE file distributed with
# this work for additional information regarding copyright ownership.
# The ASF licenses this file to You under the Apache License, Version 2.0
# (the "License"); you may not use this file except in compliance with
# the License. You may obtain a copy of the License at
#
# http://www.apache.org/licenses/LICENSE-2.0
#
# Unless required by applicable law or agreed to in writing, software
# distributed under the License is distributed on an "AS IS" BASIS,
# WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
# See the License for the specific language governing permissions and
# limitations under the License.
# 所属集群名字
brokerClusterName=DefaultCluster
# broker 名字，注意此处不同的配置文件填写的不一样，如果在 broker-a.properties 使用: broker-a,
# 在 broker-b.properties 使用: broker-b
brokerName=broker-a
# 0 表示 Master，> 0 表示 Slave
brokerId=0
# nameServer地址，分号分割
# namesrvAddr=rocketmq-nameserver1:9876;rocketmq-nameserver2:9876
# 启动IP,如果 docker 报 com.alibaba.rocketmq.remoting.exception.RemotingConnectException: connect to <192.168.0.120:10909> failed
# 解决方式1 加上一句 producer.setVipChannelEnabled(false);，解决方式2 brokerIP1 设置宿主机IP，不要使用docker 内部IP
brokerIP1=192.168.1.16
# 在发送消息时，自动创建服务器不存在的topic，默认创建的队列数
defaultTopicQueueNums=4
# 是否允许 Broker 自动创建 Topic，建议线下开启，线上关闭 ！！！这里仔细看是 false，false，false
autoCreateTopicEnable=true
# 是否允许 Broker 自动创建订阅组，建议线下开启，线上关闭
autoCreateSubscriptionGroup=true
# Broker 对外服务的监听端口
listenPort=10911
# 删除文件时间点，默认凌晨4点
deleteWhen=04
# 文件保留时间，默认48小时
fileReservedTime=120
# commitLog 每个文件的大小默认1G
mapedFileSizeCommitLog=1073741824
# ConsumeQueue 每个文件默认存 30W 条，根据业务情况调整
mapedFileSizeConsumeQueue=300000
# destroyMapedFileIntervalForcibly=120000
# redeleteHangedFileInterval=120000
# 检测物理文件磁盘空间
diskMaxUsedSpaceRatio=88
# 存储路径
# storePathRootDir=/home/ztztdata/rocketmq-all-4.1.0-incubating/store
# commitLog 存储路径
# storePathCommitLog=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/commitlog
# 消费队列存储
# storePathConsumeQueue=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/consumequeue
# 消息索引存储路径
# storePathIndex=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/index
# checkpoint 文件存储路径
# storeCheckpoint=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/checkpoint
# abort 文件存储路径
# abortFile=/home/ztztdata/rocketmq-all-4.1.0-incubating/store/abort
# 限制的消息大小
maxMessageSize=65536
# flushCommitLogLeastPages=4
# flushConsumeQueueLeastPages=2
# flushCommitLogThoroughInterval=10000
# flushConsumeQueueThoroughInterval=60000
# Broker 的角色
# - ASYNC_MASTER 异步复制Master
# - SYNC_MASTER 同步双写Master
# - SLAVE
brokerRole=ASYNC_MASTER
# 刷盘方式
# - ASYNC_FLUSH 异步刷盘
# - SYNC_FLUSH 同步刷盘
flushDiskType=ASYNC_FLUSH
# 发消息线程池数量
# sendMessageThreadPoolNums=128
# 拉消息线程池数量
# pullMessageThreadPoolNums=128
構成ファイルの内容を少し変更するだけで済みます。つまり、brokerIP1この属性は、ipconfig表示に使用できるローカルIPに変更します。
変更後、開始docker-compose.ymlするファイルの場所にコマンドを直接入力できますdocker-compose up。起動が成功したら、ブラウザhttp://localhost:8080/に入力して管理ページを表示します。これは、ビルドが正常に行われたことを意味します。
Springbootをすぐに始めましょう
ここでは、springbootを使用してmqの使用をすばやく開始し、rocketmq-spring-boot-starterモジュールを使用します。
pomの構成は次のとおりです
<!--在pom.xml中添加依赖-->
<dependency>
<groupid>org.apache.rocketmq</groupid>
<artifactid>rocketmq-spring-boot-starter</artifactid>
<version>2.0.3</version>
</dependency>
Gradleの構成は次のとおりです
implementation 'org.apache.rocketmq:rocketmq-spring-boot-starter:2.0.3'
コンシューマーサービス送信者の構成は次のとおりです。
## application.properties
rocketmq.name-server=ip:9876
rocketmq.producer.group=my-group
コンシューマーサービスの送信者の手順は次のとおりです。
@SpringBootApplication
public class ProducerApplication implements CommandLineRunner {
@Resource
private RocketMQTemplate rocketMQTemplate;
public static void main(String[] args){
SpringApplication.run(ProducerApplication.class, args);
}
public void run(String... args) throws Exception {
rocketMQTemplate.convertAndSend("test-topic-1", "Hello, World!");
rocketMQTemplate.send("test-topic-1", MessageBuilder.withPayload("Hello, World! I'm from spring message").build());
}
}
ここでトラブルを回避すれば、同じプロジェクトでコンシューマーとプロデューサーを書くことができます。
メッセージコンシューマの構成は次のとおりです。
## application.properties
rocketmq.name-server=ip:9876
プログラムを実行している消費者のメッセージは次のとおりです。
@SpringBootApplication
public class ConsumerApplication{
public static void main(String[] args){
SpringApplication.run(ConsumerApplication.class, args);
}
@Slf4j
@Service
@RocketMQMessageListener(topic = "test-topic-1", consumerGroup = "my-consumer_test-topic-1")
public static class MyConsumer1 implements RocketMQListener<string> {
public void onMessage(String message) {
log.info("received message: {}", message);
}
}
}
これまでのところ、このマシンでRocketMQに関連するさまざまなことを楽しく試すことができます。
RocketMQのDocker構成ファイルストレージ
RocketMQのDocker構成ファイルストレージ
RocketMQのDocker構成ファイルストレージ
プロジェクトを上から直接プルすることができ、RocketMQを起動するのに2つのステップしかかかりません。
-
変更したパラメータを、ローカルIPを変更
broker.confbrokerIP1 -
docker-compose.ymlファイルのパスを入力し、docker-compose upコマンドを実行します
Springbootプロジェクトを自分でビルドしたくない場合は、https：//github.com/modouxiansheng/Doraemonから直接プルできます。
------------------------------------------- <終了> ---- -----------------------------------
無数のプログラマーを学ばないでください