Hive设置参数-指定引擎-队列

文章转载:https://www.cnblogs.com/huangmr0811/p/5571001.html

Hive提供三种可以改变环境变量的方法,分别是:(1)、修改${HIVE_HOME}/conf/hive-site.xml配置文件;(2)、命令行参数;(3)、在已经进入cli时进行参数声明。下面分别来介绍这几种设定。

方法一:
  在Hive中,所有的默认配置都在HIVEHOME/conf/hive−default.xml文件中,如果需要对默认的配置进行修改,可以创建一个hive−site.xml文件,放在{HIVE_HOME}/conf/hive-default.xml文件中,如果需要对默认的配置进行修改,可以创建一个hive-site.xml文件,放在HIVEHOME/conf/hivedefault.xmlhivesite.xml{HIVE_HOME}/conf目录下。里面可以对一些配置进行个性化设定。在hive-site.xml的格式如下:

<configuration><property><name>hive.metastore.warehouse.dir</name><value>/user/hive/warehouse</value><description>location ofdefault database for the warehouse</description></property>
</configuration>

所有的配置都是放在标签之间,一个configuration标签里面可以存在多个标签。标签里面就是我们想要设定属性的名称;标签里面是我们想要设定的值;<description;<标签是描述在这个属性的,可以不写。绝大多少配置都是在xml文件里面配置的,因为在这里做的配置都全局用户都生效,而且是永久的。用户自定义配置会覆盖默认配置。另外,Hive也会读入Hadoop的配置,因为Hive是作为Hadoop的客户端启动的,Hive的配置会覆盖Hadoop的配置。

方法二:
  在启动Hive cli的时候进行配置,可以在命令行添加-hiveconf param=value来设定参数,例如:

1

[wyp@master ~]$ hive --hiveconf mapreduce.job.queuename=queue1

这样在Hive中所有MapReduce作业都提交到队列queue1中。这一设定对本次启动的会话有效,下次启动需要重新配置。

方法三:
  在已经进入cli时进行参数声明,可以在HQL中使用SET关键字设定参数,例如:

hive> set mapreduce.job.queuename=queue1;

这样也能达到方法二的效果。这种配置也是对本次启动的会话有效,下次启动需要重新配置。在HQL中使用SET关键字还可以查看配置的值,如下:

hive> set mapreduce.job.queuename;mapreduce.job.queuename=queue1

我们可以得到mapreduce.job.queuename=queue1。如果set后面什么都不添加,这样可以查到Hive的所有属性配置,如下:

hive> set;
datanucleus.autoCreateSchema=true
datanucleus.autoStartMechanismMode=checked
datanucleus.cache.level2=false
datanucleus.cache.level2.type=none
datanucleus.connectionPoolingType=DBCP
datanucleus.identifierFactory=datanucleus
datanucleus.plugin.pluginRegistryBundleCheck=LOG
datanucleus.storeManagerType=rdbms
datanucleus.transactionIsolation=read-committed
datanucleus.validateColumns=false
datanucleus.validateConstraints=false
datanucleus.validateTables=false............................

上述三种设定方式的优先级依次递增。即参数声明覆盖命令行参数,命令行参数覆盖配置文件设定。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/570683.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

php实现 字符串加密(分类分布分工,化不可能为可能)

php实现 字符串加密&#xff08;分类分布分工&#xff0c;化不可能为可能&#xff09; 一、总结 一句话总结&#xff1a;谋而后动&#xff0c;加先伪代码&#xff0c;在带函数逻辑&#xff0c;在函数的方式可以极大的避免错误和降低难度。不然这个题目乎出现各种乱七八糟的错误…

Redis集群安装

注&#xff1a;官方给出的安装文档是在一台物理机安装多个Redis实例&#xff0c;https://redis.io/topics/cluster-tutorial&#xff0c;我的生产环境是多台物理机&#xff0c;安装起来就更简单 环境: 6台物理机 CentOS7.2-1511-minimal ip:192.168.1.101-192.168.1.106 网…

Redis-集群监控之Redis monitor

连续两天配置Redis 集群监控&#xff0c;尝试过三种开源软件&#xff0c;Redis-live,Redis-state,Redis-monitor &#xff0c;由于内网生产环境&#xff0c;每一个软件的部署都费了老劲。 简单说一下&#xff0c;避免再有人趟坑。 1、Redis-live&#xff1a;此项目5年没有维护…

Magento 架构原则

Magento架构原则 》OOP体系结构和编程原则OOP体系结构和编程原则面向对象编程&#xff08;OOP&#xff09;设计允许软件组件具有最大的灵活性和可扩展性&#xff0c;允许您设计和实现高度定制的网站。面向对象原则的优点包括结合行业标准的编程设计模式以及业务逻辑与表示的严格…

vue-cli脚手架中webpack配置基础文件详解

一、前言 vue-cli是构建vue单页应用的脚手架&#xff0c;输入一串指定的命令行从而自动生成vue.jswepack的项目模板。这其中webpack发挥了很大的作用&#xff0c;它使得我们的代码模块化&#xff0c;引入一些插件帮我们完善功能可以将文件打包压缩&#xff0c;图片转base64等。…

openssl解析国密X509证书

openssl解析国密X509证书&#xff0c;把公钥拿出来重写一下就行了 x strToX509(pbCert, pulCertLen);dwRet getCertPubKey(x, &pRSAPubKeyBlob, &pECCPubKeyBlob);ECCPUBLICKEYBLOB pec { 0 };//目标公钥pec.BitLen 256;int i 0;for (i 0; i < 64; i)…

如果Python对于磁盘没有写入权限,还会运行吗?

Python如果对于磁盘没有写入权限&#xff0c;那么编译成功的字节码文件就只会存储在内存当中&#xff0c;而不会写入到磁盘&#xff0c;每次运行Python都会重新编译&#xff0c;然后运行。 转载于:https://www.cnblogs.com/chaoguo1234/p/9247642.html

maven POM总结

可继承的字段 version property 其他占坑&#xff1a; parent import scope Dependency_Management中的scope是可以被继承的&#xff0c;http://maven.apache.org/pom.html#Dependency_Management name 不可继承 artifactId 不可继承 &#xff0c; 确定打包的最终名称。 这个…

WIN10系统电脑注册表无法删除所有指定的值如何解决的方法

WIN10系统计算机注册表一直删除失败所有指定的值怎么样操作成功的步骤 1、在开始菜单点击右击&#xff0c;找到并点击【命令提示符&#xff08;管理员&#xff09;】&#xff0c;若自动跳出操作系统的人账户控制找到并点击【是】就没有问题了&#xff1b; 2、在命令提示符中填…

windows10系统的电脑如何设置密码?

电脑是21世纪不可缺少的重要工具&#xff0c;因为电脑&#xff0c;我们的生活发生了翻天覆地的变化&#xff0c;很难想象&#xff0c;如果离开电脑&#xff0c;这个世界会变成什么样子。今天&#xff0c;我就给大家介绍一下电脑如何设置密码 1、点击桌面左下角的开始按钮&…

JVM从入门到放弃——JVM内存模型

前言 Java和C或者是C相比较而言&#xff0c;最大的区别是C系列的程序员在编写代码的时候&#xff0c;总是要对程序中的变量进行释放内存的操作&#xff0c;所以在编写C或者是C的程序员需要格外的谨慎&#xff0c;因为他们对程序的内存有着很高的权限&#xff0c;这样虽然是特点…

小弟个人学习的过程!!!

小弟学生一个&#xff0c;高考没有考到一个好的学校&#xff0c;只能在不入流的学校学习软件。 之所以学习软件&#xff0c;因为听说软件行业比较赚钱。好吧&#xff01;&#xff1a; ) 因为大学学校教的太过基础&#xff0c;小弟只能开始自学之旅。 当然前期是在网上搜索教学视…

Win10强制更新怎么关闭 彻底禁止Windows自动更新

很多Win10用户来说经常会遇到这样的烦恼&#xff0c;电脑系统会不时的提醒自动更新&#xff0c;而且一等就要等很长时间&#xff0c;而通过手动禁止Windows update自带更新服务&#xff0c;往往会出现死灰复燃现象。 自己的电脑&#xff0c;竟然做不了主&#xff1f;小编表示不…

这个故事告诉你,拥有吃不胖的超能力就无忧无虑

这个故事告诉你&#xff0c;拥有吃不胖的超能力就无忧无虑了吗&#xff1f;本文转载自古代文学网 《塑胶人》剧照   导语   澳大利亚有部喜剧短片叫《塑胶人》&#xff0c;女主在约会前万事不顺&#xff0c;直到发现自己的外形居然能够像橡皮泥一样&#xff0c;用手塑造。…

同步异步 阻塞非阻塞

首先知道同步异步与阻塞非阻塞不是一个层次的概念 “阻塞”与"非阻塞"与"同步"与“异步"不能简单的从字面理解&#xff0c;提供一个从分布式系统角度的回答。 1.同步与异步 同步和异步关注的是消息通信机制 (synchronous communication/ asynchronous…

吴钩:打开宋代的“隐藏玩法”

访谈吴钩   焚香点茶、听风饮酒、赶集贸易、赏春游园&#xff0c;这都是世人所知晓的宋代。但养宠物、爱插花、喜“写真”、会熬夜、懂收藏&#xff0c;才是宋代的“隐藏玩法”。宋画中拥簇的市集、鲜香的食肆、考究的庭房&#xff0c;宋史中政治制度的改良、文化的雅俗共存、…

485. Max Consecutive Ones - LeetCode

Question 485. Max Consecutive Ones Solution 题目大意:给一个数组,取连续1的最大长度 思路:遍历数组,连续1就加1,取最大 Java实现: public int findMaxConsecutiveOnes(int[] nums) {if (nums null) return 0;int result 0;int tmp 0;for (int i : nums) {if (i 1) {tmp;…

Java四种引用包括强引用,软引用,弱引用,虚引用。

强引用&#xff1a; 只要引用存在&#xff0c;垃圾回收器永远不会回收Object obj new Object();//可直接通过obj取得对应的对象 如obj.equels(new Object());而这样 obj对象对后面new Object的一个强引用&#xff0c;只有当obj这个引用被释放之后&#xff0c;对象才会被释放掉…

深入浅出的排序算法-冒泡排序

前言 大家好&#xff0c;给大家带来冒泡排序算法&#xff0c;希望你们喜欢 冒泡排序 为什么这个排序要叫冒泡呢&#xff1f;为什么不叫其他名词呢&#xff1f;其实这个取名是根据排序算法的基本思路命名的&#xff0c;见名知意&#xff0c;冒泡排序&#xff0c;就是想泡泡在水里…

MacBook创建docker私有仓库docker server gave HTTP response to HTTPS client 问题处理办法

在 mac上搭建一个私有仓库&#xff0c;在向仓库push镜像时&#xff0c;会报如下错误&#xff1a; #docker push 192.168.163.131:5000/test Get https://192.168.163.131:5000/v1/_ping: http: server gave HTTP response to HTTPS client 百度了下答案发现都不试用mac版本的d…