前言
接上文https://blog.csdn.net/saynaihe/article/details/115187298 kubeadm 搭建高可用ha集群，接下来思考的度量有存储，对外裸露服务。日志收集，监控报警几项。集体习惯就先将存储优先来探讨了。
对于存储storageclass
如https://kubernetes.io/zh/docs/concepts/storage/storage-classes所示，常见的有很多类型,如下：
因为我的集群建在私有云下面 腾讯云有开源的cbs 的 csi组件。在kubernetes1.16-1.18 环境应用docker 做runtime的环境中应用过腾讯云的开源组件。这就又拿来用了。不便集成。
初始环境
加入：https://editor.csdn.net/md/?articleId=115187298
| 主机名 | ip | 零碎 | 内核 |
|---|---|---|---|
| sh-master-01 | 10.3.2.5 | centos8 | 4.18.0-240.15.1.el8_3.x86_64 |
| sh-master-02 | 10.3.2.13 | centos8 | 4.18.0-240.15.1.el8_3.x86_64 |
| sh-master-03 | 10.3.2.16 | centos8 | 4.18.0-240.15.1.el8_3.x86_64 |
| sh-work-01 | 10.3.2.2 | centos8 | 4.18.0-240.15.1.el8_3.x86_64 |
| sh-work-02 | 10.3.2.2 | centos8 | 4.18.0-240.15.1.el8_3.x86_64 |
| sh-work-03 | 10.3.2.4 | centos8 | 4.18.0-240.15.1.el8_3.x86_64 |
集成腾讯云 CBS CSI
1. clone 仓库
注： kubernetes-csi-tencentcloud中包含 CBS CSI， CFS CSI 与 COSFS CSI。这里我就只用CBS块存储了。其余两个也用过，感觉用起来还是不太适宜。
git clone https://github.com/TencentCloud/kubernetes-csi-tencentcloud.git各种名词能够参照：https://github.com/TencentCloud/kubernetes-csi-tencentcloud/blob/master/docs/README_CBS_zhCN.md。
2.参照文档前置要求实现kubernetes集群的配置批改
1. master节点
参照https://github.com/TencentCloud/kubernetes-csi-tencentcloud/blob/master/docs/README_CBS_zhCN.md。参照一下图片前置要求
对三台master节点批改 kube-apiserver.yaml kube-controller-manager.yaml kube-scheduler.yaml。减少如下配置（查看对应版本对应需要）
- --feature-gates=VolumeSnapshotDataSource=true2. 批改所有节点的kubelet配置
kubelet减少--feature-gates=VolumeSnapshotDataSource=true的反对
3.部署CBS CSI插件
1. 应用腾讯云 API Credential 创立 kubernetes secret:
1. 前提：
首先的在腾讯云后盾https://console.cloud.tencent.com/cam创立一个用户，拜访形式我是只开明了编程拜访，至于用户权限则须要开明CBS相干权限。我是间接绑定了CSB两个默认相干的权限，还有财务付款权限，记得肯定的反对付款，否则硬盘创立不了......。玩的好的能够自定义创立下权限，否则集体感觉财务权限貌似有点大......
2. 依据文档提醒将SecretId SecretKey base64转换生成kubernetes secret
echo -n "XXXXXXXXXXX" |base6 echo -n "XXXXXXXXXX" |base64将base64写入secret.yaml文件
cd /root/kubernetes-csi-tencentcloud-master/deploy/cbs/kuberneteskubectl apply -f secret.yaml注：我的项目是在root目录git clone的，故cd /root/kubernetes-csi-tencentcloud-master/deploy/cbs/kubernetes.包含一下没有特别强调目录的，都是在此目录下执行的
2. 创立rbac
创立attacher,provisioner,plugin须要的rbac：
kubectl apply -f csi-controller-rbac.yamlkubectl apply -f csi-node-rbac.yaml3.创立controller,node和plugin
创立controller plugin和node plugin
kubectl apply -f csi-controller.yamlkubectl apply -f csi-node.yaml### snapshot-crd我没有应用，字面意思应该是快照的....kubectl apply -f snapshot-crd.yaml kubectl get pods -n kube-system 能够看到cbs-csi相干组件创立ing：
4. 验证
切换目录
cd /root/kubernetes-csi-tencentcloud-master/deploy/cbs/examples
- 参照storageclass参数批改storageclass-basic.yaml
创立storageclass: kubectl apply -f storageclass-basic.yaml创立pvc: kubectl apply -f pvc.yaml创立申请pvc的pod: kubectl apply -f app.yaml
嗯 kubectl get storageclass
到此为止，搭建其余利用就能够用cbs存储了。具体参数看文档 看文档 看文档 说三遍。