? 优质资源分享 ?
学习路线指引(点击解锁) | 知识定位 | 人群定位 |
---|---|---|
? Python实战微信订餐小程序 ? | 进阶级 | 本课程是python flask+微信小程序的完美结合,从项目搭建到腾讯云部署上线,打造一个全栈订餐系统。 |
?Python量化交易实战? | 入门级 | 手把手带你打造一个易扩展、更安全、效率更高的量化交易系统 |
PV&PVC&HeadlessService
4.1、什么是无状态/有状态服务?
无状态服务:
1、没有实时的数据需要存储 (即使有,也是静态数据)
2、服务集群网络中,拿掉一个服务后,一段时间后,加入这个服务,对服务集群没有任何影响。
比如:
目前开发应用程序(Java代码)
有状态服务:
1、有实时的数据需要存储
2、服务集群网络中,拿掉一个服务后,一段时间后,加入这个服务,对服务集群有一定的影响(数据完整性,一致性)
比如:
关系型数据库(mysql、sqlserver)
4.2、服务部署
4.2.1、无状态服务部署
kubernetes部署无状态服务,部署架构,形态:对于无状态服务部署的几个关键对象:Deployment、ReplicaSet、Pod.
![image.png](https://img-blog.csdnimg.cn/img_convert/70a1973317a8f092ac761dfffe6e8c7b.png#clientId=u6f753306-2b93-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=315&id=u9edc2fb6&margin=[object Object]&name=image.png&originHeight=637&originWidth=813&originalType=binary&ratio=1&rotation=0&showTitle=false&size=61537&status=done&style=none&taskId=ua4110db2-1045-420f-8c14-a7f69fad267&title=&width=402.509033203125)
4.2.2、有状态服务部署
在kubernetes中,服务部署的最小单元都是POD;对于部署有状态服务,必须对POD容器的数据存储做持久化处理。需要引入PV(persistent volume)PVC(persistent volume claim)、磁盘等存储器。
![image.png](https://img-blog.csdnimg.cn/img_convert/9122db9d92cec90446cbf7a9dd71ef9c.png#clientId=u6f753306-2b93-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=356&id=uc003cfc5&margin=[object Object]&name=image.png&originHeight=837&originWidth=908&originalType=binary&ratio=1&rotation=0&showTitle=false&size=110533&status=done&style=none&taskId=u56e28529-d1d6-4475-a082-6177e137de1&title=&width=385.9908752441406)
4.3、Volume 数据卷
4.3.1 数据卷结构
![image.png](https://img-blog.csdnimg.cn/img_convert/815c5e8b8997214f688474fa145ca436.png#clientId=u6f753306-2b93-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=320&id=uf5e6de93&margin=[object Object]&name=image.png&originHeight=616&originWidth=621&originalType=binary&ratio=1&rotation=0&showTitle=false&size=57821&status=done&style=none&taskId=uc9edd737-c914-46d1-ac70-1e8f9f181f8&title=&width=322.963623046875)
Volume数据卷生命周期:(volume数据卷是kubernetes资源对象,本身并不存储数据,而仅仅是提供把数据挂载到容器中的能力)
1、pod内部容器宕机,volume数据卷及数据不会丢失;
2、pod宕机,此时volume数据卷消失了,数据也丢失了,重建的pod无法找回数据了。
![image.png](https://img-blog.csdnimg.cn/img_convert/e81e327fcbc44755ba4c3049c128f0d3.png#clientId=u6f753306-2b93-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=423&id=u45f6f7f0&margin=[object Object]&name=image.png&originHeight=723&originWidth=554&originalType=binary&ratio=1&rotation=0&showTitle=false&size=85096&status=done&style=none&taskId=u7f7cfaeb-e1da-4dae-a236-6aefba6aaa0&title=&width=324.4908752441406)
Volume 数据卷是Kubernetes抽象出来的一个资源对象,它本身不存储数据,它主要实现数据挂载(把不同存储介质中的数据给挂载到pod内部容器中)
4.3.2 数据卷的类型
![image.png](https://img-blog.csdnimg.cn/img_convert/eddea929f5097e1613d97ab89c7ce020.png#clientId=u6f753306-2b93-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=439&id=u91985fd1&margin=[object Object]&name=image.png&originHeight=720&originWidth=963&originalType=binary&ratio=1&rotation=0&showTitle=false&size=242389&status=done&style=none&taskId=uadd0e70c-f8ea-4711-af24-90180cc0ab0&title=&width=586.9954223632812)
4.3.3 本地挂载卷
- emptyDir 数据卷空挂载方式
![image.png](https://img-blog.csdnimg.cn/img_convert/df55eee79bae2886169ffca8de507389.png#clientId=u6f753306-2b93-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=313&id=u3e814873&margin=[object Object]&name=image.png&originHeight=359&originWidth=750&originalType=binary&ratio=1&rotation=0&showTitle=false&size=37740&status=done&style=none&taskId=u0db3de3a-1b7a-4a20-805a-29ec43aebb6&title=&width=654.5454318464302)
验证:进入容器内部,发现有/cache目录,但是没有数据
![image.png](https://img-blog.csdnimg.cn/img_convert/f7c30374a71b6bc3693616da09e5ed34.png#clientId=u6f753306-2b93-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=102&id=u1e7fe218&margin=[object Object]&name=image.png&originHeight=117&originWidth=1226&originalType=binary&ratio=1&rotation=0&showTitle=false&size=8505&status=done&style=none&taskId=u38d930ff-ed08-4f0b-81be-b29ab514641&title=&width=1069.963599258298)
2)hostpath 磁盘挂载方式:
apiVersion: v1
kind: Pod
metadata:
name: test-pd
spec:
containers:
- image: k8s.gcr.io/test-webserver
name: test-container
volumeMounts:
- mountPath: /test-pd
name: test-volume
volumes:
- name: test-volume
hostPath:
# 宿主上目录位置
path: /data
# 此字段为可选
type: Directory
4.3.4 网络存储卷
1)首先自行安装一台nfs服务器。
2)yaml文件
apiVersion: v1
kind: Pod
metadata:
name: nfs
spec:
containers:
- image: harbor.hyz.com/library/mynginx:v1
name: test-vo
volumeMounts:
- mountPath: /cache
name: test-nfs
volumes:
- name: test-nfs
nfs:
server: 192.168.211.13
path: /data/harbor
4.3、configmap
4.3.1 什么是configmap?
ConfigMap是k8s提供的一个配置中心,类似于微服务架构中(nacos,zookeeper)配置中心服务,用来存储一些配置文件。
例如:
1、部署Redis服务,可以把redis.conf配置文件存储在configmap资源对象中;
2、部署mysql服务,可以把my.cnf配置文件存储在configmap资源对象中。
ConfigMap资源对象存储结构:key-value模式,key是关键字符,value可以是字符串,也可以是一个文件内容。
4.3.2 创建configmap
Examples:
# Create a new configmap named my-config based on folder bar
kubectl create configmap my-config --from-file=path/to/bar
# Create a new configmap named my-config with specified keys instead of file basenames on disk
kubectl create configmap my-config --from-file=key1=/path/to/bar/file1.txt --from-file=key2=/path/to/bar/file2.txt
# Create a new configmap named my-config with key1=config1 and key2=config2
kubectl create configmap my-config --from-literal=key1=config1 --from-literal=key2=config2
# Create a new configmap named my-config from the key=value pairs in the file
kubectl create configmap my-config --from-file=path/to/bar
# Create a new configmap named my-config from an env file
kubectl create configmap my-config --from-env-file=path/to/bar.env
1、根据目录创建kubect create cm my-config-1 --from-file=/data/config
2、根据文件创建kubectl create cm my-config-2 --from-file=/data/config/application.yml
3、根据字面量(key-value)创建kubectl create cm my-config-3 --from-literal=key=value1 --from-literal=key2=value2
4.3.3 Pod服务引用
1)使用单个 ConfigMap 中的数据定义容器环境变量
apiVersion: v1
kind: Pod
metadata:
name: dapi-test-pod
spec:
containers:
- name: test-container
image: harbor.hyz.com/library/mynginx:v1
command: [ "/bin/sh", "-c", "env" ]
env:
# 定义环境变量
- name: SPECIAL_LEVEL_KEY
valueFrom:
configMapKeyRef:
# ConfigMap 包含你要赋给 SPECIAL_LEVEL_KEY 的值
name: special-config
# 指定与取值相关的键名
key: special.how
restartPolicy: Never
经过测试:发现成功的把configmap中数据引入到环境变量中;
![image.png](https://img-blog.csdnimg.cn/img_convert/541b3cae118afb108e7f9eb913e44cea.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=292&id=ub09091ef&margin=[object Object]&name=image.png&originHeight=434&originWidth=497&originalType=binary&ratio=1&rotation=0&showTitle=false&size=35848&status=done&style=none&taskId=u3b0d1d18-3f52-40fa-b53d-628b785a397&title=&width=334.74542236328125)
2)volume方式挂载:
apiVersion: v1
kind: Pod
metadata:
name: cm-volume
spec:
containers:
- image: harbor.hyz.com/library/mynginx:v1
name: test-container
command: [ "/bin/sh", "-c", "sleep 600s" ]
volumeMounts:
- name: config-volume
mountPath: /etc/config
volumes:
- name: config-volume
configMap:
name: my-config-2
查看容器内部是否挂载成功:
![image.png](https://img-blog.csdnimg.cn/img_convert/b44c71ff1c7a14455a95a43302a9e807.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=121&id=u979c5391&margin=[object Object]&name=image.png&originHeight=149&originWidth=707&originalType=binary&ratio=1&rotation=0&showTitle=false&size=8669&status=done&style=none&taskId=u5aeb7683-0dee-4f0a-91ef-dd4319660a6&title=&width=572.0045166015625)
my-config-2中的4个文件都挂载成功。
4.3.4 POD数据热更新
修改ConfigMap中的数据,pod服务能够马上察觉到。
4.4、Secret
4.4.1 Secret是什么?
Secret是kubernetes本地数据卷的一种,secret提供存储敏感数据的一种服务,用来把敏感存储secret对象中,保证服务的安全性。
具体作用:防止一些敏感数据直接保证服务镜像中;例如:token, 秘钥,密码等等。当pod需要这些数据的时候,动态的从secret资源对象中加载即可。
4.4.2 k8s认证方式
Secret有4种类型:
- Service Account :用来访问Kubernetes API,由Kubernetes自动创建,并且会自动挂载到Pod的/run/secrets/kubernetes.io/serviceaccount目录中;
![image.png](https://img-blog.csdnimg.cn/img_convert/94bea988fbfade2084701c9b76fe534a.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=80&id=ud61d540a&margin=[object Object]&name=image.png&originHeight=92&originWidth=464&originalType=binary&ratio=1&rotation=0&showTitle=false&size=3711&status=done&style=none&taskId=u16f75eaa-8ec2-42dc-907b-77d04873c1a&title=&width=404.94544050232486)
![image.png](https://img-blog.csdnimg.cn/img_convert/0bf9b059a9b6f67c9e220ddda1811c2d.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=237&id=udb1ccaaf&margin=[object Object]&name=image.png&originHeight=327&originWidth=553&originalType=binary&ratio=1&rotation=0&showTitle=false&size=46694&status=done&style=none&taskId=u8a705696-8200-4854-94ea-f4166c4d15c&title=&width=401.6181640625) - Opaque :base64编码格式的Secret,用来存储密码、密钥、信息、证书等,类型标识符为generic;
- kubernetes.io/dockerconfigjson :用来存储私有docker registry的认证信息,类型标识为docker-registry。
- kubernetes.io/tls:用于为SSL通信模式存储证书和私钥文件,命令式创建类型标识为tls。
![image.png](https://img-blog.csdnimg.cn/img_convert/0bfc989e060d4f4fec19e8283815be55.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=328&id=u855fb601&margin=[object Object]&name=image.png&originHeight=616&originWidth=950&originalType=binary&ratio=1&rotation=0&showTitle=false&size=48178&status=done&style=none&taskId=ubad20038-279d-4c61-8b61-5fdee2ca264&title=&width=506.0045166015625)
当我们采用rest风格访问k8s api时,需要携带一些鉴权信息,比如token\ca证书\账号密码等,之后每台Node节点会根据鉴权信息去master鉴权。
4.4.3 Secret使用
[root@k8s-master01 stateful]# echo -n "admin" | base64
YWRtaW4=
[root@k8s-master01 stateful]# echo -n "abcdefgh" | base64
YWJjZGVmZ2g=
apiVersion: v1
kind: Secret
metadata:
name: mysecret
type: Opaque
data:
password: YWJjZGVmZ2g=
username: YWRtaW4=
4.4.4 pod服务引用
apiVersion: v1
kind: Pod
metadata:
name: secret-test
labels:
name: secret-test
spec:
volumes:
- name: secrets
secret:
secretName: mysecret
containers:
- image: harbor.hyz.com/library/mynginx:v1
name: test-container
volumeMounts:
- name: secrets
mountPath: "/etc/secrets"
readOnly: true
验证:进入容器/etc/secrets目录下,打印username, password属性
![image.png](https://img-blog.csdnimg.cn/img_convert/515ff2c12b21d1ff52b42ba1c6bcc956.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=99&id=u790e2c69&margin=[object Object]&name=image.png&originHeight=114&originWidth=338&originalType=binary&ratio=1&rotation=0&showTitle=false&size=3793&status=done&style=none&taskId=u998ec3de-6591-4f29-8f4f-10d4641cb38&title=&width=294.9818079521246)
确实是我们进行加密后的2个源字符串。
4.5、PV(persistent volume)
4.5.1 PV是什么?
Pv持久化数据卷,是用来让服务和存储介质解耦(让volume数据卷和底层的存储介质进行解耦,volume数据卷消失了,但是pv不会消失,pv和pod没有强关联,当pod被重构后,根据hostname不变性,从而可以再次找回数据,保证数据的不丢失),因此为了部署有状态服务,kubernetes抽象出来了一个PV持久化数据资源对象,k8s可以自由的控制这个资源对象,其作用就是屏蔽掉底层复杂的存储介质的操作,使得kubernetes管理持久化的数据卷更加高效,简单。
4.5.2 pv原理
企业中服务部署需要存储数据:前期规划数据大小,需要多少存储空间?? 然后由运维帮助创建持久化数据卷,根据需求大小进行创建.
![image.png](https://img-blog.csdnimg.cn/img_convert/7e6271bf14312881030fe20ca97e2a7a.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=110&id=u5702fead&margin=[object Object]&name=image.png&originHeight=137&originWidth=869&originalType=binary&ratio=1&rotation=0&showTitle=false&size=8579&status=done&style=none&taskId=u0aa2d284-485c-4970-bb1e-5a9c81ecb21&title=&width=700.0045166015625)
可以把pv对象看做一个一个虚拟存储块,是一种虚拟化的概念,在逻辑上实现对物理资源隔离,同时实现对底层物理存储介质的抽象,使得k8s更加方便的管理存储空间,想使用哪个存储块,由k8s实现自由的调度。
![image.png](https://img-blog.csdnimg.cn/img_convert/e58fb34f5a69f7049fd3a297cbc97360.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=291&id=u8f9f22ae&margin=[object Object]&name=image.png&originHeight=407&originWidth=981&originalType=binary&ratio=1&rotation=0&showTitle=false&size=81233&status=done&style=none&taskId=u9e343f2f-58d4-4b7d-9087-1513792b17f&title=&width=702.0045166015625)
Pv是k8s抽象出来的资源对象,k8s自由控制自己的资源对象
Pv存储块是根据业务需求,事先由运维先规划,创建好存储块,项目需要,从存储块中获取数据即可。
问题: 创建pod服务时候,需要存储数据,但是pv存储对象有上万个,pod应该是哪个pv存储块?
4.5.3 PVC匹配PV
Pvc(persistent volume claim) 持久化的数据卷声明卷,代理pod发送请求,帮助pod匹配一个合适的pv对象;
![image.png](https://img-blog.csdnimg.cn/img_convert/7cec046abd2e62bcc20fac269b1781f1.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=263&id=u676ce137&margin=[object Object]&name=image.png&originHeight=413&originWidth=1001&originalType=binary&ratio=1&rotation=0&showTitle=false&size=43456&status=done&style=none&taskId=u01fce3bc-2653-4f35-af4e-d6868a90c36&title=&width=637.0045166015625)
疑问:pvc是如何找到合适的pv资源对象?
![image.png](https://img-blog.csdnimg.cn/img_convert/a71739cdc6a4bae254a31054ea3e0cb8.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=372&id=u8a63f1e1&margin=[object Object]&name=image.png&originHeight=491&originWidth=839&originalType=binary&ratio=1&rotation=0&showTitle=false&size=89631&status=done&style=none&taskId=u19ddcd65-0c48-47d8-999d-eb86748f658&title=&width=635.2181396484375)
创建pod服务的时候,存储数据,绑定一合适的pv对象:
1、向pvc发出请求,让pvc帮助我们选择一个合适的pv存储块
2、pvc发送申请请求,请求匹配一个合适的pv存储对象,匹配方式如下:
1)、访问大小
2)、访问方式
4.6 PV&PVC 案例
4.6.1 创建PV对象
1)创建Pv1
apiVersion: v1
kind: PersistentVolume
metadata:
name: my-pv1
spec:
capacity:
storage: 5Gi
accessModes:
- ReadWriteMany
nfs:
path: /opt/hyz
server: 192.168.66.13
2)创建pv2
apiVersion: v1
kind: PersistentVolume
metadata:
name: my-pv2
spec:
capacity:
storage: 7Gi
accessModes:
- ReadWriteMany
nfs:
path: /opt/hyz
server: 192.168.66.13
4.6.2 创建Pod对象
apiVersion: v1
kind: Pod
metadata:
name: pv-pod
spec:
containers:
- image: harbor.hyz.com/library/mynginx:v1
name: test-container
ports:
- containerPort: 80
volumeMounts:
- name: www
mountPath: /usr/share/nginx/html
volumes:
- name: www
persistentVolumeClaim:
claimName: my-pvc
4.6.3 创建pvc对象
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name: my-pvc
spec:
accessModes:
- ReadWriteMany
resources:
request:
storage: 5Gi
4.6.4 挂载流程
![image.png](https://img-blog.csdnimg.cn/img_convert/f64ff990d06e348d57ef3942aac5064e.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=527&id=ua1b98f15&margin=[object Object]&name=image.png&originHeight=604&originWidth=979&originalType=binary&ratio=1&rotation=0&showTitle=false&size=173024&status=done&style=none&taskId=ua102d46c-7714-4173-8261-4ad8f51b65c&title=&width=854.399970370207)
4.7 headlessService
HeadlessService : 字面意思: 无头服务,内涵含义:没有ip地址的Service; 也就是说对于有状态服务部署来说,使用的是headlessService, 不会给service分配ip地址;
HeadlessService作用就是把后端服务的ip地址暴露给前端,便于客户端使用。
![image.png](https://img-blog.csdnimg.cn/img_convert/2ae440922db0d2116e2235d707306b57.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=346&id=ua03afba8&margin=[object Object]&name=image.png&originHeight=501&originWidth=856&originalType=binary&ratio=1&rotation=0&showTitle=false&size=51666&status=done&style=none&taskId=u1435165b-3949-403f-b14f-1179dc9249e&title=&width=591.0045166015625)
4.8 storageClass
根据需求: 创建pv存储块对象,可以想象:在开发中,需要大量的存储块,如果使用人工创建,非常低效,且没有含金量。
因此根据解放生产力指标:让pv按需动态创建,再也不需要人为的方式创建。使用storageclass实现pv对象动态创建。
![image.png](https://img-blog.csdnimg.cn/img_convert/ad6a5fe53e645d8fada847b129df866c.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=390&id=udf56e5ab&margin=[object Object]&name=image.png&originHeight=554&originWidth=974&originalType=binary&ratio=1&rotation=0&showTitle=false&size=378837&status=done&style=none&taskId=u27d4057a-60fe-4fed-8b7a-e77b91517b3&title=&width=686.0045166015625)
Storageclass 动态创建pv存储块实现的部署方案:
![image.png](https://img-blog.csdnimg.cn/img_convert/edc41539e4077dc9f8ca141b8a0c0ffb.png#clientId=u3b59d664-42ea-4&crop=0&crop=0&crop=1&crop=1&from=paste&height=361&id=u63c226c2&margin=[object Object]&name=image.png&originHeight=414&originWidth=957&originalType=binary&ratio=1&rotation=0&showTitle=false&size=253505&status=done&style=none&taskId=u1f19fa61-a9dd-4820-a03b-6aa541215cf&title=&width=835.199971036045)
要想实现pv按需动态创建,那必须先完成环境配置:
1、安装storageclass
2、安装persistent volume provisioner
转载请注明:xuhss » k8s之有状态服务部署基石(基础知识)