八，Linux基础环境搭建（CentOS7）- 安装Mysql和Hive

Linux基础环境搭建（CentOS7）- 安装Mysql和Hive

大家注意以下的环境搭建版本号，如果版本不匹配有可能出现问题！

一、Mysql下载及安装

MySQL是一个关系型数据库管理系统，由瑞典MySQL AB 公司开发，属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一，在 WEB 应用方面，MySQL是最好的 RDBMS (Relational Database Management System，关系数据库管理系统) 应用软件之一。

MySQL是一种关系型数据库管理系统，关系数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样就增加了速度并提高了灵活性。

MySQL所使用的 SQL 语言是用于访问数据库的最常用标准化语言。MySQL 软件采用了双授权政策，分为社区版和商业版，由于其体积小、速度快、总体拥有成本低，尤其是开放源码这一特点，一般中小型网站的开发都选择 MySQL 作为网站数据库。

在这里插入图片描述
Mysql的下载（slave2）

Mysql下载链接：https://pan.baidu.com/s/1Hh2dnzXEiiHaL7vxwQMtpg

提取码：5l4o

将下载的安装包通过Xftp传输到Linux虚拟机/opt/software/中

Mysql的安装
yum remove mysql-libs			#删除本机的mysql 一路按y
cd /opt/software/
tar -xvf mysql-5.7.20-1.el6.x86_64.rpm-bundle.tarrpm -ivh mysql-community-common-5.7.20-1.el6.x86_64.rpm
rpm -ivh mysql-community-libs-5.7.20-1.el6.x86_64.rpm
rpm -ivh mysql-community-client-5.7.20-1.el6.x86_64.rpm
rpm -ivh mysql-community-server-5.7.20-1.el6.x86_64.rpm --force --nodeps
Mysql启动服务
systemctl daemon-reload				#重载所有修改过的配置文件
systemctl start mysqld				#开启服务
systemctl enable mysqld				#开机自启 若不成功也不影响
登录MySQL数据库
grep "temporary password" /var/log/mysqld.log		#获取初密码
mysql -uroot -p										#登陆MySQL（注意中英文）
在这里插入图片描述
MySQL密码安全策略设置
set global validate_password_policy=0;								#设置密码强度为低级
set global validate_password_length=4;								#设置密码长度
alter user 'root'@'localhost' identified by '123456';				#修改用户密码
\q																	#退出
设置远程登录
mysql -uroot -p123456											#以新密码登陆MySQL
create user 'root'@'%' identified by '123456';					#创建用户
grant all privileges on *.* to 'root'@'%' with grant option;	#允许远程连接
flush privileges;												#刷新权限
create database if not exists test;								#创建数据库test

二、Hive下载及安装

hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低，可以通过类似SQL语句实现快速MapReduce统计，使MapReduce变得更加简单，而不必开发专门的MapReduce应用程序。hive十分适合对数据仓库进行统计分析。 在这里插入图片描述

Hive的下载（master操作）

Hive下载链接：https://pan.baidu.com/s/1Dxq9Hh-zu0RjuM_R3yNgfw

提取码：96io

将下载的安装包通过Xftp传输到Linux虚拟机/opt/software/中

HIve的安装（master操作）
mkdir -p /usr/hive
cd /opt/software/
tar -zxvf apache-hive-2.1.1-bin.tar.gz -C /usr/hive/
配置profile
vim /etc/profile

添加内容如下：

#set hive
export HIVE_HOME=/usr/hive/apache-hive-2.1.1-bin
export PATH=$PATH:$HIVE_HOME/bin
在这里插入图片描述

刷新profile文件

source /etc/profile
将Hive和profile文件传到slave1
scp -r /usr/hive/ root@slave1:/usr/	
scp -r /etc/profile root@slave1:/etc/profile
解决版本冲突
cp /usr/hive/apache-hive-2.1.1-bin/lib/jline-2.12.jar /usr/hadoop/hadoop-2.7.3/share/hadoop/yarn/lib/
修改hive-site.xml文件
cd /usr/hive/apache-hive-2.1.1-bin/conf/
vim hive-site.xml

修改内容如下：

<configuration>
<!-- Hive产生的元数据存放位置-->
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive_remote/warehouse</value>
</property>
<!--- 使用本地服务连接Hive,默认为true-->
<property>
<name>hive.metastore.local</name>
<value>false</value>
</property>
<!-- 连接服务器-->
<property>
<name>hive.metastore.uris</name>
<value>thrift://slave1:9083</value>
</property>
</configuration>
在这里插入图片描述
修改hive-env.sh中HADOOP_HOME环境变量
cd /usr/hive/apache-hive-2.1.1-bin/conf/
mv hive-env.sh.template hive-env.sh
vim hive-env.sh

修改内容如下：

HADOOP_HOME=/usr/hadoop/hadoop-2.7.3
export HIVE_CONF_DIR=/usr/hive/apache-hive-2.1.1-bin/conf
在这里插入图片描述

三、Hive的配置（slave1操作）

mysql依赖包下载

mysql依赖包下载链接：https://pan.baidu.com/s/1bjQPoaMab3CMiS1-5ojGgw

提取码：a4l3

将mysql依赖包放入slave1 Hive中
cd /usr/hive/apache-hive-2.1.1-bin/lib 
cp /opt/software/mysql-connector-java-5.1.47-bin.jar /usr/hive/apache-hive-2.1.1-bin/lib/
修改hive-env.sh文件
cd /usr/hive/apache-hive-2.1.1-bin/conf/
cp hive-env.sh.template hive-env.sh
vim hive-env.sh

修改内容如下：

HADOOP_HOME=/usr/hadoop/hadoop-2.7.3
export HIVE_CONF_DIR=/usr/hive/apache-hive-2.1.1-bin/conf
在这里插入图片描述
修改hive-site.xml文件
vim /usr/hive/apache-hive-2.1.1-bin/conf/hive-site.xml

添加内容如下：

<configuration>
<!-- Hive产生的元数据存放位置-->
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive_remote/warehouse</value>
</property>
<!-- 数据库连接JDBC的URL地址-->
<property>
<name>javax.jdo.option.ConnectionURL</name> 
<value>jdbc:mysql://slave2:3306/hive?createDatabaseIfNotExist=true&useSSL=false</value>
</property>
<!-- 数据库连接driver，即MySQL驱动-->
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<!-- MySQL数据库用户名-->
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<!-- MySQL数据库密码-->
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
</property>
<property>
<name>hive.metastore.schema.verification</name>
<value>false</value>
</property>
<property>
<name>datanucleus.schema.autoCreateAll</name>
<value>true</value>
</property>
</configuration>
检查profile文件
vim /etc/profile

在这里插入图片描述 如果没有错误的话，source一下profile文件

source /etc/profile

四、Mysql和Hive启动

启动hadoop集群（master上）
cd /usr/hadoop/hadoop-2.7.3/sbin/
start-all.sh
启动hive server服务（slave1上）
cd /usr/hive/apache-hive-2.1.1-bin/
bin/hive --service metastore
在这里插入图片描述
启动hive client(master上)
cd /usr/hive/apache-hive-2.1.1-bin/
bin/hive

成功就会跳到hive的输入界面 在这里插入图片描述

五、测试hive是否启动成功

查看数据库
hive>show databases;
在这里插入图片描述
创建数据库
hive>create database testbase;
在这里插入图片描述
复制一个master会话，查看一下master进程

在这里插入图片描述 如果可以查看以及建立数据库，进程中有RunJar进程，则代表Mysql和Hive安装成功啦~

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/bicheng/58546.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

Virtuoso使用layout绘制版图、使用Calibre验证DRC和LVS

Virtuoso使用layout绘制版图、使用Calibre验证DRC和LVS

1 绘制版图 1.1 进入Layout XL 绘制好Schmatic后，在原理图界面点击Launch，点击Layout XL进入版图绘制界面。 1.2 导入元件 1、在Layout XL界面左下角找到Generate All from Source。 2、在Generate Layout界面，选中“Instance”&#…
阅读更多...
Spring事务的实现方式

Spring事务的实现方式

前言 Spring的spring-tx模块提供了对事务管理支持，使用Spring事务可以让我们从复杂的事务处理中得到解脱，无需去处理获得连接、关闭连接、事务提交和回滚等这些操作。Spring事务管理是Spring框架提供的一个核心功能，它允许开发者以声明式或编…
阅读更多...
线性代数（1）——线性方程组的几何意义

线性代数（1）——线性方程组的几何意义

线性代数的基本问题是求解个未知数的个线性方程； 例如：（方程1）。 在线性代数的第一讲中，我们从Row Picture、Column Picture、Matrix Picture三个角度来看这个问题。 上面的系统是二维的。通过添加第三个变量&#…
阅读更多...
没有对象来和我手撕红黑树吧

没有对象来和我手撕红黑树吧

1. 红黑树的介绍 红黑树也是一种自平衡的二叉搜索树，在每一个节点增加了一个存储位来表示节点的颜色，可以是红色也可以是黑色，通过约束颜色来维持树的平衡，具有以下的性质： 每个节点不是红色就是黑色根节点为黑色如果…
阅读更多...
Android中SurfaceView与GLSurfaceView 的关系

Android中SurfaceView与GLSurfaceView 的关系

SurfaceView 与 GLSurfaceView 的关系 在 Android 开发中，SurfaceView 和 GLSurfaceView 是实现自定义渲染效果的关键组件。它们提供了不同的渲染方式，适用于不同的应用场景。我们将通过以下几个方面详细说明 SurfaceView 和 GLSurfaceView 的特点及实现…
阅读更多...
DEVOPS: 容器与虚拟化与云原生

DEVOPS: 容器与虚拟化与云原生

概述 传统虚拟机，利用 hypervisor，模拟出独立的硬件和系统，在此之上创建应用虚拟机是一个主机模拟出多个主机虚拟机需要先拥有独立的系统docker 是把应用及配套环境独立打包成一个单位docker 是在主机系统中建立多个应用及配套环境docker 是…
阅读更多...
H7-TOOL的LUA小程序教程第16期：脉冲测量，4路PWM，多路GPIO和波形打印(2024-10-25, 更新完毕)

H7-TOOL的LUA小程序教程第16期：脉冲测量，4路PWM，多路GPIO和波形打印(2024-10-25, 更新完毕)

LUA脚本的好处是用户可以根据自己注册的一批API（当前TOOL已经提供了几百个函数供大家使用），实现各种小程序，不再限制Flash里面已经下载的程序，就跟手机安装APP差不多，所以在H7-TOOL里面被广泛使用&#xff…
阅读更多...
西瓜书《机器学习》符号表KaTex表示

西瓜书《机器学习》符号表KaTex表示

写这篇post的缘故是最近整理机器学习的相关公式，经常要用到 KaTeX \KaTeX KATE​X, 但网络上搜索到的西瓜书符号表的表示有些并不准确或不严谨，本着严谨治学的态度，整理了一下符号表的 KaTeX \KaTeX KATE​X表示，希望有所帮助,整理…
阅读更多...
docker的安装配置与基本简单命令

docker的安装配置与基本简单命令

目录 1.docker简介 2.docker安装 2.1使用root用户登陆 更新yum源 2.2安装依赖 2.3设置yum源 更新yum源索引 2.4安装docker 2.5启动并且设置开机自启动 2.6验证安装是否成功 2.7配置docker加速器 2.8重启docker服务 3.docker简单使用 3.1下载镜像 3.2列出…
阅读更多...
从线性代数到unity mvp矩阵

从线性代数到unity mvp矩阵

坐标变换：矩阵是一种线性空间变换的描述（矩阵的列向量，是坐标变换后的基向量）。 如: 如上图,即向量(-1,2)在经过由基底x轴:(1, -2) ,y轴:(3, 0)组成的矩阵变换后得到向量(5,2) 实际上就是-1倍的x轴:(1, -2)加上2倍的y轴:(3,…
阅读更多...
线程同步 线程安全

线程同步 线程安全

这里写目录标题 线程安全互斥锁**互斥锁初始化****互斥锁加锁和解锁****销毁互斥锁****互斥锁死锁****互斥锁的属性** 条件变量条件变量初始化通知和等待条件变量条件变量的判断条件 自旋锁自旋锁初始化自旋锁加锁和解锁 读写锁读写锁初始化读写锁上锁和解锁读写锁的属性 线程安…
阅读更多...
使用Python和OpenCV实现火焰检测

使用Python和OpenCV实现火焰检测

使用Python和OpenCV实现火焰检测 项目解释： 此 Python 代码是使用 OpenCV、线程、声音和电子邮件功能的火灾探测系统的简单示例。 以下是它的功能的简单描述： 导入库：代码首先导入必要的库： cv2：用于图像和视频处理…
阅读更多...
蓝桥杯基本算法~~~一维/二维前缀和问题

蓝桥杯基本算法~~~一维/二维前缀和问题

文章目录 1.一维前缀和2.二维前缀和3.移动零问题4.颜色的分类问题 1.一维前缀和 问题说明：一维就是表示的是一维数组的计算，我们的这个一维前缀和是基于这个一维数组进行计算的； 什么是前缀和：就是10 20 30 40 50这个数组&#…
阅读更多...
ubuntu20.04系统安装

ubuntu20.04系统安装

文章目录 前言参考1 一、准备工作1、进入BIOS，设置 UEFI/Legacy Boot选项 为UEFI2、进入BIOS界面将Secure Boot禁用3、USB启动为enable 二、单系统安装1、插入U盘，电脑正常开机后 总结 前言 装了很多次ubuntu系统，整理一篇自己的文章很费时间…
阅读更多...
JS | CommonJS、AMD、CMD、ES6-Module、UMD五种JS模块化规范

JS | CommonJS、AMD、CMD、ES6-Module、UMD五种JS模块化规范

目录 前言 一、CommonJS 模块化规范 二、ES6 模块化规范 三、AMD 模块化规范 四、CMD 模块化规范 五、UMD模块化规范 前言 这三个规范都是为Js模块化加载而生的，使模块能够按需加载，使系统同庞杂的代码得到组织和管理。模块化的管理代码使多人开发…
阅读更多...
【宠物狗狗数据集】 犬类品种识别 宠物狗检测 深度学习 目标检测（含数据集）

【宠物狗狗数据集】 犬类品种识别 宠物狗检测 深度学习 目标检测（含数据集）

一、背景意义 随着人们对宠物狗的喜爱日益增加，犬种的多样性也逐渐受到重视。狗狗不仅是家庭的好伴侣，更在多个领域中发挥着重要作用，如导盲、搜救、疗愈等。因此，准确识别和分类各种犬种显得尤为重要。传统的犬种识别方法往往依赖…
阅读更多...
移远通信闪耀2024香港秋灯展，以丰富的Matter产品及方案推动智能家居产业发展

移远通信闪耀2024香港秋灯展，以丰富的Matter产品及方案推动智能家居产业发展

10月27-30日，2024香港国际秋季灯饰展在香港会议展览中心盛大开展。 作为全球领先的物联网整体解决方案供应商，移远通信再次亮相，并重点展示了旗下支持Matter协议以及亚马逊ACK ( Alexa Connect Kit ) SDK for Matter方案的Wi-Fi模组、低功耗蓝…
阅读更多...
虚拟机桥接模式连不上，无法进行SSH等远程操作

虚拟机桥接模式连不上，无法进行SSH等远程操作

说明：以下情况在window10上遇到，解决后顺便做了个笔记，以防后续再次用到，也给同道中人提供一个解决方案 一、首先按照以下步骤进行检查 1、是否连接了对应的wifi 2、是否设置了桥接模式 3、上述1、2确认无误的情况下请查看右上…
阅读更多...
ApsaraMQ Serverless 能力再升级，事件驱动架构赋能 AI 应用

ApsaraMQ Serverless 能力再升级，事件驱动架构赋能 AI 应用

本文整理于 2024 年云栖大会阿里云智能集团高级技术专家金吉祥（牟羽）带来的主题演讲《ApsaraMQ Serverless 能力再升级，事件驱动架构赋能 AI 应用》 云消息队列 ApsaraMQ 全系列产品 Serverless 化，支持按量付费、自适应弹性、跨可…
阅读更多...
一款专业获取 iOS 设备的 UDID 工具｜一键获取iPhone iPad设备的 UDID

一款专业获取 iOS 设备的 UDID 工具｜一键获取iPhone iPad设备的 UDID

什么是UDID？ UDID，是iOS设备的一个唯一识别码，每台iOS设备都有一个独一无二的编码，这个编码，我们称之为识别码，也叫做UDID（ Unique Device Identifier） 扫描后系统提示输入密码&am…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023