启动kafka失败报内存不足(Cannot allocate memory)

原因分析,因为我的虚拟机内存一共才1G 

查看一下我的虚拟机内存还剩余多少?

 天呐,我的只有60M了

我们看下kafka的启动脚本

vim kafka-server-start.sh

看见下面的脚本文件内容没有,默认是1G,而我只有60M,启动肯定报内存不足,怎么办呢?当然我们就需要给虚拟机增加内存 

如何怎么加虚拟机内存? 

很简单关机再vmware编辑虚拟机设置

记得一定要先关机,关机之后才能编辑你看我这已经调成4G

然后重启zookeeper集群

重启kafka集群

cd /usr/local/hadoop/kafka/kafka_2.12-2.4.1
bin/kafka-server-start.sh config/server.properties

看见如上图所示启动成功kafka

查看下kafka启动的进程

另外两台也是如此操作

上面起送只是前台启动,kafka还有两种启动方式 

方法一:加守护进程启动
在bin的上一级目录执行命令:
bin/kafka-server-start.sh -daemon config/server.properties方法二:通过后台来启动
在bin的上一级目录执行命令:
nohup bin/kafka-server-start.sh config/server.properties &

关闭kafka集群命令

[root@backup01 kafka_2.12-2.4.1]#  bin/kafka-server-stop.sh stop 
[root@backup02 kafka_2.12-2.4.1]#  bin/kafka-server-stop.sh stop 
[root@backup02 kafka_2.12-2.4.1]#  bin/kafka-server-stop.sh stop 

通过上面的学习,是不是已经学会了安装kafka和启动kafka,不知道大家有没有发现一个问题  就是启动集群要一台一台机器去启动,关闭也是一样,要是有几百台机器的集群那不是很麻烦,于是我们是不是需要一件启动,写一个shell脚本来启动集群

脚本一次启动集群

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/576497.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Introduce Null Object(引入Null对象)

Introduce Null Object(引入Null对象)你需要再三检查某对象是否为null。将null值替换为null对象。if (customer null) plan BillingPlan.basic(); else plan customer.getPlan(); 动机多态的最根本好处在于:你不必再向对象询问"你是…

推荐系统从0到1_1

推荐系统从0到1_1,目录中的内容会在专栏中一一补充和详细介绍。请大家耐心等待 。目录结构引言推荐系统的必要性搭建推荐系统所需要的材料推荐系统整体框架概览推荐系统核心技术框架数据预处理用户画像EE问题和相关算法曝光量的重要性和CTR的置信度TopN推荐CF算法原…

zookeeper Error contacting service. It is probably not running

通过命令zkServer.sh start之后,显示STARTED 通过client测试报错 无法连接 连接关闭 Connecting to localhost:2181 2020-03-29 12:44:31,855 [myid:] - INFO [main:Environment100] - Client environment:zookeeper.version3.4.13-2d71af4dbe22557fda74f9a9b430…

关于应用程序配置文件类的使用 总结

先占位,晚上写!转载于:https://www.cnblogs.com/lppblogs/archive/2012/04/24/2467950.html

kafka通过脚本一次启动集群

kafka 群起脚本kafka.sh #!/bin/bashcase $1 in "start"){for i in backup01 backup02 backup03do echo " $i " ssh $i /usr/local/hadoop/kafka/kafka_2.12-2.4.1/bin/kafka-server-start.sh -daemon /usr/local/hadoop/kafka/kafka_2.12-2.4.1/binconf…

引言

推荐系统从0到1_引言什么是推荐?什么是推荐系统?推荐系统的应用什么是推荐? 说起推荐,就不得不说搜索。搜索这里指信息检索,在大量的信息中,我们需要找到自己需要的信息,就用到了搜索引擎&…

DB2中select top 用法

DB2中请使用select * from TableName fetch first 10 rows only转载于:https://www.cnblogs.com/wangpei/archive/2012/04/26/2471336.html

推荐系统的必要性

推荐系统的必要性引言回顾你需要推荐系统吗?怎么做?引言回顾 在专栏文章的引言中,我们讨论了推荐和推荐系统,以及推荐系统的应用。这里我感觉有必要再通俗地介绍下推荐系统。我们所存在的世界是不断发展的,发展是靠着…

JNI的方式调用DLL(SO)(上)

最近有个项目要调用原有的DLL文件,本来准备使用JNA,可是客户不同意,非要使用JNI的方式。万般无奈之下,只能重新使用JNI,现将JAVA调用动态链接库的一般方法总结如下。 JNI是Java Native Interface(JAVA本地调…

搭建推荐系统所需要的材料

搭建推荐系统所需要的材料人力物力推荐系统的原材料物品流量最后人力物力 在上一小节中《推荐系统的必要性》里已经讨论过一个推荐业务团队需要哪些人员储备,需要什么核心技术等。这里在重点说下物力,即机器资源设备。 往往从头开始搭建这样一个团队&a…

kafka:topic为什么要进行分区?副本机制是如何做的?

kafka为什么要在topic里加入分区的概念?如果没有分区,topic中的segment消息写满后,直接给订阅者不是也可以吗? Kafka可以将主题划分为多个分区(Partition),会根据分区规则选择把消息存储到哪个分区中,只要如…

将某字符串切割成阵列并排序列出

老师布置的另外一道题是将字符串"a;b;d;z;y;u"切割成阵列并排序列出。老师出这题也许是让Insus.NET掌握或复习Array.Sort()函数,不管怎样,先按自己的想法实现,然后是等老师的意见。protected void Page_Load(object sender, EventA…

Kafka史上最详细原理总结

原文链接:Kafka史上最详细原理总结_我是Alvin家鸡鸭鱼的小米米-CSDN博客_kafka史上最详细原理总结

关于管理,这5大误区你越早知道越好

关于管理,这5大误区你越早知道越好 原创: 陈春花 管理的常识 绝大部分人都感觉自己已经非常努力地工作,但结果却不尽如人意,到底问题出在哪里? 就让北京大学国家发展研究院管理学教授、北大国发院BiMBA商学院院长陈春…

大数据技术之 Kafka (第 3 章 Kafka 架构深入 ) Log存储解析

Kafka 工作流程 Kafka 中消息是以 topic 进行分类的,生产者生产消息,消费者消费消息,都是面向 topic的。 topic 是逻辑上的概念,而 partition 是物理上的概念,每个 partition 对应于一个 log 文件,该 log…

IIS上配置运行cgi,php,aspx运行环境

1、配置PHP程序运行环境: 把PHP解释程序安装到C:\php目录下,然后把此目录下的php4ts.dll文件复制到c:\windows\system32目录下。接着把PHP目录下的 php.ini.dist文件改名为php.ini,并编辑此文件,找到register_globals off这一项修…

推荐系统整体框架概览

推荐系统整体框架概览推荐系统整体架构 推荐系统的核心组成部分离线核心节点服务UI总结推荐系统整体架构 先说点题外话,最近在看的书中讲到了怎么进行自学的方法,分了十个层级。第一个便是要了解所学内容的概况,也就是轮廓,大的东…

大数据技术之 Kafka (第 3 章 Kafka 架构深入 ) Kafka 生产者

3.2.1 分区策略 1)分区的原因 (1)方便在集群中扩展,每个 Partition 可以通过调整以适应它所在的机器,而一个 topic又可以有多个 Partition 组成,因此整个集群就可以适应任意大小的数据了; &a…

大学(转载)

1. 别怕丢人,追求丢人是一种成功的尝试,至于为此笑话你的人,你可以把他们从你将来人生对手的名单中排除了,你也要为每一位上台唱歌的人鼓掌。2、你有足够的理由佩服每天早起的人,不信的话,你去做。做到后会…

自燃型员工的特点

自燃型员工的特点原文:https://mp.weixin.qq.com/s/SaQ_GG7CpPqdGc_l5jffag 稻盛和夫曾经说过,人分为三种: 一种是自燃型,自我驱动,自我燃烧; 第二种是点燃型,需要别人在背后推一把;…