为什么采用宿主机而不采用 Docker 方式快速搭建
在搭建 RocketMQ 测试环境时,我们可以选择在宿主机上直接安装和配置,也可以使用 Docker 容器来快速搭建。然而,为什么我们选择了在宿主机上安装而不是使用 Docker 方式呢?
-
调整配置的灵活性:在 Docker 方式下,虽然可以使用环境变量来设置配置项,但是有时候需要对容器内部的配置文件进行修改,(默认RocketMQ broker 吃内存8个G电脑配置差docker更本起不来)这可能不太方便。在宿主机上直接安装,则可以直接编辑配置文件,更加灵活地调整配置。
-
调试和排查问题的方便性:在宿主机上安装的 RocketMQ 实例,可以直接在宿主机上查看日志、调试程序,更容易排查问题。而在 Docker 容器中,需要通过 Docker logs 命令或者进入容器内部来查看日志,相对来说更加繁琐。
综上所述,虽然 Docker 提供了快速部署和便捷管理的优势,但在某些情况下,直接在宿主机上安装 RocketMQ 可能更加灵活、性能更好,并且更容易调试和排查问题。因此,在选择搭建测试环境时,我们根据实际情况选择了在宿主机上安装 RocketMQ。
第一步:源码下载和安装
wget https://archive.apache.org/dist/rocketmq/4.9.5/rocketmq-all-4.9.5-bin-release.zipunzip rocketmq-all-4.9.5-bin-release.zipmv rocketmq-all-4.9.5-bin-release /app/rocketmq
查看RocketMQ的更多版本链接
第二步:修改初始内存
# 修改初始内存【修改两个启动脚本的jvm】
cd /app/rocketmq/bin/
vim runserver.sh
# 修改初始堆内存大小,要不测试环境没那么多内存
原:JAVA_OPT="${JAVA_OPT} -server -Xms4g -Xmx4g -Xmn2g -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"
改:JAVA_OPT="${JAVA_OPT} -server -Xms1g -Xmx1g -Xmn512m -XX:MetaspaceSize=128m -XX:MaxMetaspaceSize=320m"vim runbroker.sh
# 修改初始堆内存大小,要不测试环境没那么多内存
原: JAVA_OPT="${JAVA_OPT} -server -Xms8g -Xmx8g"
改: JAVA_OPT="${JAVA_OPT} -server -Xms256m -Xmx256m -Xmn128m"
第三步:启动RocketMQ单机
# 启动NameServer,bin目录前台启动,确定没报错再后台启动 【sh bin/mqnamesrv &】
[root@slavenode1 bin]# ./mqnamesrv
The Name Server boot success. serializeType=JSON# 启动broker,bin目录前台启动,确定没报错再后台启动
[root@masternode1 bin]# ./mqbroker -n localhost:9876
The broker[masternode1, 192.168.1.160:10911] boot success. serializeType=JSON and name server is localhost:9876# 查看进程
[root@masternode1 ~]# jps
2214 Jps
2071 BrokerStartup
1947 NamesrvStartup
第四步:发送消息测试
消费着启动
export NAMESRV_ADDR=localhost:9876./tools.sh org.apache.rocketmq.example.quickstart.Consumer
发送测试消息
export NAMESRV_ADDR=localhost:9876./tools.sh org.apache.rocketmq.example.quickstart.Producer
第五步:docker控制台搭建rocketmq-dashboard
docker run -d \--name rocketmq-dashboard \-p 8060:8080 \-v /apps/rocketmq-dashboard/data:/tmp/rocketmq-console/data \-e NAMESRV_ADDR=0.0.0.0:9876 \apacherocketmq/rocketmq-dashboard:1.0.0
- -v /apps/rocketmq-dashboard/data:/tmp/rocketmq-console/data 参数用于将主机的 /apps/rocketmq-dashboard/data 目录映射到容器的 /tmp/rocketmq-console/data
目录,这样可以持久化保存 RocketMQ Dashboard 的数据。 - -e NAMESRV_ADDR=0.0.0.0:9876 参数用于设置环境变量 NAMESRV_ADDR,指定 RocketMQ 的 Namesrv 地址。
第六步:rocketmq-client-go 测试延迟消息
延迟5秒代码测试示例
consumer.go
package mainimport ("context""fmt""github.com/apache/rocketmq-client-go/v2""github.com/apache/rocketmq-client-go/v2/consumer""github.com/apache/rocketmq-client-go/v2/primitive""os""time"
)func main() {// 设置推送消费者c, _ := rocketmq.NewPushConsumer(//消费组consumer.WithGroupName("testGroup"),// namesrv地址consumer.WithNameServer([]string{"127.0.0.1:9876"}),)// 必须先在 开始前err := c.Subscribe("Topic-test", consumer.MessageSelector{}, func(ctx context.Context, ext ...*primitive.MessageExt) (consumer.ConsumeResult, error) {for i := range ext {// 获取消息正文body := ext[i].Bodyfmt.Printf("获取到值:%s \n", body)}return consumer.ConsumeSuccess, nil})if err != nil {fmt.Println(err.Error())}err = c.Start()if err != nil {fmt.Println(err.Error())os.Exit(-1)}time.Sleep(time.Hour)err = c.Shutdown()if err != nil {fmt.Printf("shutdown Consumer error:%s", err.Error())}
}
export ROCKETMQ_GO_LOG_LEVEL=warn
go run consumer.go
producer_delay.go
func main() {p, _ := rocketmq.NewProducer(// 设置 nameSrvAddr// nameSrvAddr 是 Topic 路由注册中心producer.WithNameServer([]string{"0.0.0.0:9876"}),// 指定发送失败时的重试时间producer.WithRetry(3),// 设置 Groupproducer.WithGroupName("testGroup"),)// 开始连接err := p.Start()if err != nil {fmt.Printf("start producer error: %s", err.Error())os.Exit(2)}// 设置节点名称topic := "Topic-test"// 循环发送信息 (同步发送)for i := 0; i < 10; i++ {msg := &primitive.Message{Topic: topic,Body: []byte("RocketMQ Go producer_delay.go [" + strconv.Itoa(i) + "] " + time.Now().Format("2006-01-02 15:04:05")),}time.Sleep(time.Second)// WithDelayTimeLevel set message delay time to consume.// reference delay level definition: 1s 5s 10s 30s 1m 2m 3m 4m 5m 6m 7m 8m 9m 10m 20m 30m 1h 2h// delay level starts from 1. for example, if we set param level=1, then the delay time is 1s.// 设置消息的延时级别为 2,对应 RocketMQ 配置中的延时时间 5smsg.WithDelayTimeLevel(2)// 发送信息res, err := p.SendSync(context.Background(), msg)if err != nil {fmt.Printf("发送失败!:%s\n", err)} else {fmt.Printf("发送成功 : result=%s\n", res.String())}}// 关闭生产者err = p.Shutdown()if err != nil {fmt.Printf("shutdown producer error:%s", err.Error())}
}