Hadoop 配置文件 启动方式

配置文件:

默认的配置文件:相对应的jar 中

core-default.xml

hdfs-default.xml

yarn-default.xml

mapred-default.xml

自定义配置文件$HADOOP_HOME/etc/hadoop/

core.site.xml

hdfs-site.xml

yarn-site.xml

mapredu-site.xml

 

启动方式:

各个服务器组建逐一启动

* hdfs

   hadoop-daemon.sh start|stop namenode|datanode|secondarynamenode

*yarn

yarn-daemon.sh start|stop resourcemanager|nodemanager

*mapreduce 

mr-historyserver-daemon.sh start|stop historyserver

各个模块分开启动

* hdfs

   start-dfs.shstop-dfs.sh

*yarn

start-yarn.shstop-yarn.sh

全部启动(不推荐使用,几乎没人使用) 是因为启动hdfs,yarn 必须在主节点上 ,all 启动的话,这个节点必须是namenode 节点,也是resourcemanager节点,实际生产分布在不同机器,不同节点上

start-all.shstop-all.sh


 

 

转载于:https://www.cnblogs.com/pickKnow/p/10735351.html

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/425049.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

第二章 随机变量

随机变量  目标:将实验结果数量化。实验结构有数字型和非数字型。数字型:降雨量、上车人数等。非数字型:晴天/阴天/下雨、化验结果阴性/阳性等。  定义:随机试验样本空间S,如果XX(e)为定义在S上的实数单值函数&…

[Leetcode][第632题][JAVA][最小区间][堆][滑动窗口]

【问题描述】[困难] 【解答思路】 1. 堆 复杂度 class Solution {public int[] smallestRange(List<List<Integer>> nums) {//区间的左边和右边int rangeLeft 0, rangeRight Integer.MAX_VALUE;//最小范围int minRange rangeRight - rangeLeft;//区间的左边最…

第十期:过去50年间,十大热门语言及发明者大盘点

本文收集了十大热门编程语言背后的程序员和设计者的名字和大家分享。以下是十大热门编程语言及其创建者&#xff0c;排名不分先后。 软件领域有许多编程语言&#xff0c;每年还涌现出越来越的新语言。新发布的语言有Scala、Kotlin、Go和Closure&#xff0c;但历史证明&#xff…

2018-2019-2 20165212《网络攻防技术》Exp5 MSF基础应用

2018-2019-2 20165212《网络攻防技术》Exp5 MSF基础应用 攻击成果 主动攻击的实践 ms17010eternalblue payload windows/x64/meterpreter/reverse_tcp&#xff08;成功&#xff09;payload generic/shellreversetcp&#xff08;成功&#xff09;ms17010psexec&#xff08;成功且…

【数据结构与算法】复杂度分析

一、什么是复杂度分析&#xff1f; 1.数据结构和算法解决是“如何让计算机更快时间、更省空间的解决问题”。 2.因此需从执行时间和占用空间两个维度来评估数据结构和算法的性能。 3.分别用时间复杂度和空间复杂度两个概念来描述性能问题&#xff0c;二者统称为复杂度。 4.复杂…

第十一期:30秒内便能学会的30个实用Python代码片段

许多人在数据科学、机器学习、web开发、脚本编写和自动化等领域中都会使用Python&#xff0c;它是一种十分流行的语言。 Python流行的部分原因在于简单易学。 本文将简要介绍30个简短的、且能在30秒内掌握的代码片段。 1. 唯一性 以下方法可以检查给定列表是否有重复的地方&…

使用scikit中的聚类

这是一次数据实验。基于七月算法邹博讲义和scikit-lean官网。 聚类&#xff1a;就是对大量未知标注的数据集&#xff0c;按数据的内在相似性将数据划分为多个类别&#xff0c;使得类别内的数据相似性较大而类别间的相似性较小。 1 k-means算法  参数&#xff1a;聚类的数目…

概率中比较重要的知识

-什么是协方差&#xff1f; 就是衡量两个随机变量&#xff08;X,YX,YX,Y&#xff09;之间相关性的量&#xff0c;取多个两个量的样本&#xff0c;通过判断他们大小变化关系&#xff0c;判断这两个量是正相关还是负相关或无相关。 记做&#xff1a;Cov(X,Y)E[(X−E(X))(Y−E(Y)…

MySQL学习(三)

-- 计算字段 -- 拼接字段 SELECT CONCAT(vend_name, (,vend_country,)) FROM Vendors ORDER BY vend_name;SELECT CONCAT(vend_name,vend_country) FROM Vendors ORDER BY vend_name;-- CONCAT(str1,str2,...) 拼接查询的值 SELECT CONCAT(vend_name,vend_country) FROM Vendo…

[Leetcode][第114题][JAVA][二叉树展开为链表][递归][迭代]

【问题描述】[中等] 【解答思路】 1. 前序遍历 将二叉树展开为单链表之后&#xff0c;单链表中的节点顺序即为二叉树的前序遍历访问各节点的顺序。因此&#xff0c;可以对二叉树进行前序遍历&#xff0c;获得各节点被访问到的顺序。 由于将二叉树展开为链表之后会破坏二叉树的…

第三十八期:美国数据隐私保护法案来临,明年1月生效,现仅2%企业合规

2018 年美国加州通过消费者隐私法案&#xff08;CCPA&#xff09;&#xff0c;缓冲一年多后&#xff0c;将于 2020 年 1 月生效。届时&#xff0c;类似于欧盟的法案&#xff0c;CCPA 将对所有和美国加州居民有业务的数据商业行为进行监管。 依然在应付欧盟数据保护法案(GDPR)的…

二元随机变量

本章记录  1二元随机变量的定义  2二元离散型随机变量的定义、联合概率分布律、边际分布律、条件分布律  3二元离散型随机变量联合概率分布律函数、边际分布函数、条件分布函数  4二元连续型随机变量的定义、联合概率密度函数、边际密度函数、条件密度函数 二元随机变…

深度学习:什么是backbone,benchmark,baseline

backbone&#xff1a;骨干网络&#xff0c;比如alexnet&#xff0c;ZFnet&#xff0c;VGG&#xff0c;googlenet... benchmark&#xff1a;性能指标&#xff0c;比如accuracy&#xff0c;内存消耗&#xff0c;模型复杂度&#xff0c;或者在性能上很有代表性的算法框架。 base…

6.mysql 锁机制

概述 定义&#xff1a; 锁是计算机协调多个进程或者线程并发访问某一资源的机制 在数据库中&#xff0c;除传统的计算资源&#xff08;如CPU,RAM,IO等&#xff09;的争用以外&#xff0c;数据也是一种供许多用户共享的资源。如何保证数据并发 访问的一致性、有效性是所有数据库…

第三十九期:原生图数据库的15条规则

不妨看一下原生图形数据库的15条规则。就像复杂的系统网格或空中交通管制图&#xff0c;图形数据库用节点和连接组成的网络(名为标记属性图)来表示。节点显示为圆形或正方形&#xff0c;代表人员、产品、公司或订单等实体。 就像复杂的系统网格或空中交通管制图&#xff0c;图形…

[周赛第200场][Leetcode][第5477题][第5478题][JAVA][双指针][贪心]

【问题描述】[中等]5477. 排布二进制网格的最少交换次数 【解答思路】 贪心 限制条件 第一行要求末尾的0要尽量多 计算每行最后有几个0遍历交互 符合条件 第i行的末尾0的数量为n-i-1 统计交换次数第i行的末尾0的数量小于n-i-1&#xff0c;不符合条件 时间复杂度&#xff1a…

ubuntu异常关机,断电重启后进入紧急模式,挂载磁盘SSD失败了怎么办?(Failed mount on XXX)

解决方案&#xff1a; 进入/etc/fstab中保留你所有的除了必要的系统分区挂载点&#xff0c;这里保存了所有开机引导的时候自动挂载到linux文件系统里的设备还有分区信息&#xff0c;当系统启动的时候&#xff0c;系统会在这里读取信息并挂载到相应目录下。所有的磁盘硬盘SSD挂…

476 Number Complement

问题&#xff1a;给定一个整数&#xff0c;返回它的补数。补数的是将原数据的二进制表示反转。例如 5 的二进制位是 101&#xff0c;反转之后是&#xff1a;010&#xff0c;也就是整数2。所以输入5&#xff0c;返回2.。输入1&#xff0c;返回0。  思路&#xff1a;取反操作是…

设单链表中存放n个字符,试设计一个算法,使用栈推断该字符串是否中心对称...

版权声明&#xff1a;本文为博主原创文章。未经博主同意不得转载。vasttian https://blog.csdn.net/u012860063/article/details/28281631 转载请注明出处&#xff1a;http://blog.csdn.net/u012860063 问题&#xff1a;设单链表中存放n个字符&#xff0c;试设计一个算法&#…

6项目启动

项目启动概述