win10 docker zookeeper和kafka搭建

好久没用参与大数据之类的开发了，近日接触到一个项目中使用到kafka，因此要在本地搭建一个简易的kafka服务。时间比较紧急，之前有使用docker的经验，因此本次就使用docker来完成搭建。在搭建过程中出现的一些问题，及时记录，以便后期再遇见。

环境

计算机环境：win10 22H2
docker Version：4.13.1 (90346)

zookeeper和kafka搭建

由于zookeeper与kafka是集群性质的,本次使用的目的简单就是开发一个Topic 生产者,然后通过消费者进行验证

zookeeper与kafka(理论知识后期补充吧)

zookeeper镜像下载

docker pull wurstmeister/zookeeper

kafka镜像的下载

docker pull wurstmeister/kafka

搭建网桥

docker network create kafka-network

启动zookeeper

docker run -d --name zookeeper --network kafka-network -p 2181:2181 wurstmeister/zookeeper

启动kafka

 docker run -d --name kafka --network kafka-network -p 9092:9092   -e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181   -e KAFKA_LISTENERS=PLAINTEXT://kafka:9092   -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://kafka:9092  wurstmeister/kafka

查看IP地址

docker inspect -f '{{range .NetworkSettings.Networks}}{{.IPAddress}}{{end}}'  kafka

由于使用的是网桥，可以通过服务的名称来描述ip。

kafka 日志中报错

WARN [Producer clientId=console-producer] Connection to node -1 (localhost/127.0.0.1:9092) could not be established. Broker may not be available. (org.apache.kafka.clients.NetworkClient) 警告可能是由于 Kafka 代理（broker）未正确配置或者未正确运行导致的或者 WARN [Controller id=1001, targetBrokerId=1001] Connection to node 1001 (localhost/127.0.0.1:9092) could not be established. Broker may not be available. (org.apache.kafka.clients.NetworkClient) 警告 Kafka 控制器（Controller）无法与本地主机的 Kafka 代理建立连接

解决办法

上述警告，Kafka 消费者无法连接到本地主机的 Kafka 代理（broker），经过检查，发现当时PLAINTEXT://kafka:9092 配置错误，引用的是PLAINTEXT://localhost:9092。修改PLAINTEXT://localhost:9092 ----> PLAINTEXT://kafka:9092 最终完美解决

在本地操作kafka报错

解决办法

这个错误是由于程序无法解析主机名 "kafka:9092" 导致的。所以我想到改网络，通过ip与域名的配置。由于是win10系统所有需要修改：C:\Windows\System32\drivers\etc\hosts 文件末尾加上

127.0.0.1   zookeeper
127.0.0.1   kafka

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/news/775194.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！