Kubernetes使用PV和PVC做存储安装mysql
- 环境准备
- 什么是PV和PVC
- 环境准备
- 配置nfs
- 安装nfs
- 配置nfs服务端
- 创建命名空间
- 配置pv和pvc
- pv的yaml文件
- pvc的yaml文件
- 部署mysql
- 创建mysql的root密码的secret
- 创建mysql部署的yaml
- 部署mysql
- 链接mysql
- 外部链接
- 内部链接
环境准备
首先你需要一个k8s环境,可以参考我写的文章:https://blog.csdn.net/m0_51510236/article/details/130842122
什么是PV和PVC
我们可以简单看一下官网的描述:https://kubernetes.io/zh-cn/docs/concepts/storage/persistent-volumes/#introduction
持久卷(PersistentVolume,PV) 是集群中的一块存储,可以由管理员事先制备, 或者使用存储类(Storage Class)来动态制备。 持久卷是集群资源,就像节点也是集群资源一样。PV 持久卷和普通的 Volume 一样, 也是使用卷插件来实现的,只是它们拥有独立于任何使用 PV 的 Pod 的生命周期。 此 API 对象中记述了存储的实现细节,无论其背后是 NFS、iSCSI 还是特定于云平台的存储系统。
持久卷申领(PersistentVolumeClaim,PVC) 表达的是用户对存储的请求。概念上与 Pod 类似。 Pod 会耗用节点资源,而 PVC 申领会耗用 PV 资源。Pod 可以请求特定数量的资源(CPU 和内存);同样 PVC 申领也可以请求特定的大小和访问模式 (例如,可以要求 PV 卷能够以 ReadWriteOnce、ReadOnlyMany 或 ReadWriteMany 模式之一来挂载,参见访问模式)。
本篇文章就用上面提到的nfs来搭建pv和pvc并部署mysql
环境准备
首先我们需要搭建一个k8s集群,并且准备一台nfs服务器,为了方便我就使用k8s的主节点作为nfs服务器,服务器列表如下表:
IP地址 | 服务器用途 |
---|---|
192.168.1.160 | k8s-master,k8s的主节点和nfs服务器 |
192.168.1.161 | k8s-node01,k8s的第一个工作节点 |
192.168.1.162 | k8s-node02,k8s的第二个工作节点 |
配置nfs
安装nfs
首先我们需要在三台服务器单中都需要安装nfs软件包,使用如下命令进行安装:
yum install -y nfs-utils
如图三台服务器都需要安装:
配置nfs服务端
然后我们需要在nfs的主服务器暴露一个 /data/nfs/mysql
目录,我们需要修改 /etc/exports
配置文件,需要将这一行加在里面:
/data/nfs/mysql *(rw,sync,no_root_squash)
可以直接执行这行命令,第一行为创建这个目录,第二行为修改文件
mkdir -p /data/nfs/mysql
cat >> /etc/exports << EOF
/data/nfs/mysql *(rw,sync,no_root_squash)
EOF
然后我们需要启动nfs服务,只需要在nfs服务器上执行:
systemctl enable --now nfs-server
然后我们执行这行命令,看目录是否暴露:
showmount -e nfs服务器地址
可以看到目录暴露成功:
创建命名空间
我们需要创建一个命名空间,当然也可以越过这一步,这里创建命名空间的目的只是为了更接近生产环境,创建命名空间的yaml文件:
apiVersion: v1
kind: Namespace
metadata:name: deploy-test
spec: {}
status: {}
上面的yaml文件创建了一个名为 deploy-test
的命名空间,可以查看创建结果:
配置pv和pvc
pv的yaml文件
注意按照提示修改内容:
apiVersion: v1
kind: PersistentVolume
metadata:name: deploy-mysql-nfs-pv # pv的名字namespace: deploy-test # 这里为命名空间的名字
spec:capacity:storage: 1Gi # 申请的硬盘大小为1GB,可修改accessModes:- ReadWriteMany # 权限为多节点读写nfs:# 注意修改nfs服务器地址server: 192.168.1.160# 注意修改目录的地址path: /data/nfs/mysqlstorageClassName: "nfs" # 存储类型选择nfs
pvc的yaml文件
apiVersion: v1
kind: PersistentVolumeClaim
metadata:name: deploy-mysql-nfs-pvc # 为pvc取一个好听的名字namespace: deploy-test # 命名空间名字
spec:accessModes:- ReadWriteMany # 权限为多节点读写storageClassName: "nfs" # 存储类型为nfsresources:requests:storage: 1Gi # 申请大小容量为1GBvolumeName: deploy-mysql-nfs-pv # 绑定的pv名字
执行后我们可以查看创建的状态:
部署mysql
创建mysql的root密码的secret
前面准备工作都做好了,接下来我们就可以开始部署mysql了,但是之前我们还需要创建一个secret,执行命令获取yaml文件内容:
# 命令说明
kubectl create secret generic mysql-password --from-literal=mysql_root_password=mysql的root密码 -n 命名空间 --dry-run=client -o=yaml# 命令示例
kubectl create secret generic mysql-password --from-literal=mysql_root_password=root -n deploy-test --dry-run=client -o=yaml
生成如图所示:
创建mysql部署的yaml
apiVersion: v1
kind: Service
metadata:name: deploy-mysql-svc # mysql暴露服务的名字namespace: deploy-test # 命名空间labels:app: mysql
spec:ports:- port: 3306 # 暴露给外部3306端口name: mysqltargetPort: 3306 # 内部目标3306端口nodePort: 30306 # 外部访问集群nodeport的30306端口selector:app: mysqltype: NodePortsessionAffinity: ClientIP---apiVersion: apps/v1
kind: StatefulSet # 创建一个StatefulSet有状态的控制器
metadata:name: deploy-mysql # 部署的名字namespace: deploy-test # 命名空间
spec:selector:matchLabels:app: mysqlserviceName: "deploy-mysql-svc" # 注意指定上面的那个服务名称replicas: 1template:metadata:labels:app: mysqlspec:terminationGracePeriodSeconds: 10containers:- args: # 新增一些启动参数- --character-set-server=utf8mb4- --collation-server=utf8mb4_unicode_ci- --lower_case_table_names=1- --default-time_zone=+8:00name: mysql# image: docker.io/library/mysql:5.7.43image: registry.cn-shenzhen.aliyuncs.com/xiaohh-docker/mysql:5.7.43 # 因为dockerhub上镜像经常拉取失败,所以使用此镜像ports:- containerPort: 3306 # 容器内部暴露3306端口name: mysqlvolumeMounts:- name: mysql-data # 引用pvc挂载的名字mountPath: /var/lib/mysql # 这个是容器内部存放数据的文件夹目录,需要挂在到pvc当中env:- name: MYSQL_ROOT_PASSWORDvalueFrom: # mysql的密码引用上面创建的secretsecretKeyRef:key: mysql_root_passwordname: mysql-passwordvolumes:- name: mysql-data # pvc的挂载名称persistentVolumeClaim:claimName: deploy-mysql-nfs-pvc # 指定使用那个pvc
部署mysql
整体的yaml文件内容为:
apiVersion: v1
kind: Namespace
metadata:name: deploy-test
spec: {}
status: {}---apiVersion: v1
kind: PersistentVolume
metadata:name: deploy-mysql-nfs-pvnamespace: deploy-test
spec:capacity:storage: 1GiaccessModes:- ReadWriteManynfs:server: 192.168.1.160path: /data/nfs/mysqlstorageClassName: "nfs"---apiVersion: v1
kind: PersistentVolumeClaim
metadata:name: deploy-mysql-nfs-pvcnamespace: deploy-test
spec:accessModes:- ReadWriteManystorageClassName: "nfs"resources:requests:storage: 1GivolumeName: deploy-mysql-nfs-pv---apiVersion: v1
data:mysql_root_password: cm9vdA==
kind: Secret
metadata:name: mysql-passwordnamespace: deploy-test---apiVersion: v1
kind: Service
metadata:name: deploy-mysql-svcnamespace: deploy-testlabels:app: mysql
spec:ports:- port: 3306name: mysqltargetPort: 3306nodePort: 30306selector:app: mysqltype: NodePortsessionAffinity: ClientIP---apiVersion: apps/v1
kind: StatefulSet
metadata:name: deploy-mysqlnamespace: deploy-test
spec:selector:matchLabels:app: mysqlserviceName: "deploy-mysql-svc"replicas: 1template:metadata:labels:app: mysqlspec:terminationGracePeriodSeconds: 10containers:- args:- --character-set-server=utf8mb4- --collation-server=utf8mb4_unicode_ci- --lower_case_table_names=1- --default-time_zone=+8:00name: mysql# image: docker.io/library/mysql:5.7.43image: registry.cn-shenzhen.aliyuncs.com/xiaohh-docker/mysql:5.7.43ports:- containerPort: 3306name: mysqlvolumeMounts:- name: mysql-datamountPath: /var/lib/mysqlenv:- name: MYSQL_ROOT_PASSWORDvalueFrom:secretKeyRef:key: mysql_root_passwordname: mysql-passwordvolumes:- name: mysql-datapersistentVolumeClaim:claimName: deploy-mysql-nfs-pvc
执行以下命令部署:
kubectl apply -f deploy-mysql.yaml
创建结果:
执行下面这行命令监控部署:
watch kubectl get all -o wide -n deploy-test
看到下面这个代表创建成功:
当我们查看nfs当中挂在出来的mysql目录的时候:
ll /data/nfs/mysql/
文件夹内容:
链接mysql
外部链接
在我们创建mysql的时候我们就规定了一个NodePort端口,如图:
我们直接使用集群当中任意一个节点的30306端口即可链接这个数据库:
mysql -uroot -h192.168.1.160 -p -P30306
查看结果:
内部链接
在集群里面访问我们可以通过主机名,主机名格式如下:
<pod名称>.<service名称>.<命名空间名称>.svc.cluster.local
执行命令查看:
kubectl get all -o wide -n deploy-test
各类名称如图所示:
所以我们此次访问mysql的主机名如下:
deploy-mysql-0.deploy-mysql-svc.deploy-test.svc.cluster.local
我们此次就不建立其他的pod来验证是否能够安装上了,我们直接检查集群内的dns解析是否正常就知道这个域名是否正常了,使用以下命令查看k8s集群当中的dns服务的地址:
kubectl get svc -o wide -n kube-system | grep dns
查看dns服务地址:
直接通过 nslookup
尝试解析查看是否解析到正确的IP地址上:
# 安装nslookup命令所在的软件包
yum install -y bind-utils
# 解析域名
nslookup deploy-mysql-0.deploy-mysql-svc.deploy-test.svc.cluster.local 10.96.0.10
发现域名解析是正常的:
好了,k8s上部署mysql完成了,下课