关于开源软件:如何免费部署一套开源云原生DevOps敏捷协作平台

Choerodon猪齿鱼开源全价值链多云麻利合作平台，是基于开源技术Kubernetes，Istio，knative，Gitlab，Spring Cloud来实现本地和云端环境的集成，实现企业多云/混合云应用环境的一致性。目前对于通过 Choerodon 开发部署的利用零碎有多种部署形式——kubernetes集群部署，主机 JAR 包和 Docker 部署，所以请根具部署形式的不同请灵便抉择零碎架构。

装置形式

Choerodon提供两种装置形式，即一键部署Choerodon和分步部署Choerodon。上面将介绍一键部署最小化装置Choerodon。

环境筹备

硬件最低要求

服务器总内存：32G及以上
服务总CPU数：8外围及以上
单节点硬盘：100Gb及以上（如应用NFS存储，那么NFS服务节点倡议存储不小于512G）

软件要求

零碎版本：CentOS7.4及以上
Kubernetes：1.10及以上
Helm：v3.2.4及以上

网络要求

各个服务器之间内网互通内网带宽倡议1Gbps以上
各个服务器可能拜访外网

上面将以一台8外围32G内存的服务器为例，演示如何装置猪齿鱼。

装置步骤

装置 Choerodon 首先实现 kubernetes 集群的部署和 helm 装置；而后部署 NFS 服务器端，如果你抉择其余类型的存储，能够疏忽NFS相干的搭建信息；接着应用猪齿鱼命令行工具一键式装置 Choerodon；最初部署 Gitlab Runner，其用于代码提交后主动进行代码测试、构建服务的镜像及生成helm chart并将后果发回给Choerodon。

Kubernetes 集群装置

筹备装置脚本

# 装置 git 命令行sudo yum install git -y# 克隆本我的项目代码git clone https://gitee.com/open-hand/kubeadm-ha.git# 进入我的项目目录cd kubeadm-ha# 装置 ansible 环境sudo ./ansible/install.sh

配置 ansible inventory 文件

我的项目 example 文件夹下提供了 6 个 ansible inventory 示例文件，请按需要进行抉择并批改。

拷贝我的项目下的 example/hosts.allinone.hostname.ini 文件至我的项目根目录下，命名为 inventory.ini，批改kubernetes部署版本为 1.16.15、各服务器的 IP 地址、用户名、明码，并保护好各服务器与角色的关系。

; 将所有节点的信息在这里填写;    第一个字段                  为 kubernetes 节点 nodeName，留神必须由小写字母、数字，“-”或“.”组成，并且必须以小写字母或数字结尾和结尾;    第二个字段 ansible_host     为节点内网IP;    第三个字段 ansible_port     为节点 sshd 监听端口;    第四个字段 ansible_user     为节点近程登录用户名;    第五个字段 ansible_ssh_pass 为节点近程登录用户明码[all]node1 ansible_host=192.168.56.11 ansible_port=22 ansible_user="vagrant" ansible_ssh_pass="vagrant"; 单节点lb节点组留空。[lb]; 留神etcd集群必须是1,3,5,7...奇数个节点[etcd]node1[kube-master]node1[kube-worker]node1; 预留组，后续增加master节点应用[new-master]; 预留组，后续增加worker节点应用[new-worker]; 预留组，后续增加etcd节点应用[new-etcd]; 预留组，后续删除worker角色应用[del-worker]; 预留组，后续删除master角色应用[del-master]; 预留组，后续删除etcd角色应用[del-etcd]; 预留组，后续删除节点应用[del-node];-------------------------------------- 以下为根底信息配置 ------------------------------------;[all:vars]; 是否跳过节点物理资源校验，Master节点要求2c2g以上，Worker节点要求2c4g以上skip_verify_node=false; kubernetes版本kube_version="1.20.2"; 容器运行时类型，可选项：containerd，docker；默认 containerdcontainer_manager="containerd"; 负载均衡器;   有 nginx、openresty、haproxy、envoy  和 slb 可选，默认应用 nginx;   为什么单节点 apiserver 也应用了负载平衡请参加此探讨： https://github.com/TimeBye/kubeadm-ha/issues/8lb_mode="nginx"; 应用负载平衡后集群 apiserver portlb_kube_apiserver_port="8443"; 网段抉择：pod 和 service 的网段不能与服务器网段重叠，; 若有重叠请配置 `kube_pod_subnet` 和 `kube_service_subnet` 变量设置 pod 和 service 的网段，示例参考：;    如果服务器网段为：10.0.0.1/8;       pod 网段可设置为：192.168.0.0/18;       service 网段可设置为 192.168.64.0/18;    如果服务器网段为：172.16.0.1/12;       pod 网段可设置为：10.244.0.0/18;       service 网段可设置为 10.244.64.0/18;    如果服务器网段为：192.168.0.1/16;       pod 网段可设置为：10.244.0.0/18;       service 网段可设置为 10.244.64.0/18; 集群pod ip段，默认掩码位 18 即 16384 个ipkube_pod_subnet="10.244.0.0/18"; 集群service ip段kube_service_subnet="10.244.64.0/18"; 调配给节点的 pod 子网掩码位，默认为 24 即 256 个ip，故应用这些默认值能够纳管 16384/256=64 个节点。kube_network_node_prefix="24"; node节点最大 pod 数。数量与调配给节点的 pod 子网无关，ip 数应大于 pod 数。; https://cloud.google.com/kubernetes-engine/docs/how-to/flexible-pod-cidrkube_max_pods="110"; 集群网络插件，目前反对flannel,caliconetwork_plugin="calico"; 若服务器磁盘分为系统盘与数据盘，请批改以下门路至数据盘自定义的目录。; Kubelet 根目录kubelet_root_dir="/var/lib/kubelet"; docker容器存储目录docker_storage_dir="/var/lib/docker"; containerd容器存储目录containerd_storage_dir="/var/lib/containerd"; Etcd 数据根目录etcd_data_dir="/var/lib/etcd"%

集群部署

部署集群：

# 在我的项目根目录下执行ansible-playbook -i inventory.ini 90-init-cluster.yml

查看期待 pod 的状态为 runnning：

# 任意master节点下执行kubectl get po --all-namespaces -w

如果部署失败，想要重置集群，执行：

# 在我的项目根目录下执行ansible-playbook -i inventory.ini 99-reset-cluster.yml

其余集群运维操作请查阅我的项目使用指南

Helm部署

部署客户端

在任意一个master节点执行以下命令

依据零碎下载所需版本

curl -L -o helm-v3.2.4-linux-amd64.tar.gz https://file.choerodon.com.cn/kubernetes-helm/v3.2.4/helm-v3.2.4-linux-amd64.tar.gz

解压压缩包（以linux-amd64为例）

tar -zxvf helm-v3.2.4-linux-amd64.tar.gz

将文件挪动到PATH目录中（以linux-amd64为例）

sudo mv linux-amd64/helm /usr/bin/helm

验证部署

执行命令，呈现以下信息即部署胜利。

$ helm versionversion.BuildInfo{Version:"v3.2.4", GitCommit:"0ad800ef43d3b826f31a5ad8dfbb4fe05d143688", GitTreeState:"clean", GoVersion:"go1.13.12"}

NFS动静存储卷

创立 NFS 服务器

在集群每一个节点装置nfs-utils

 sudo yum install -y nfs-utils

配置nfs-server

mkdir -p /u01/prod

编辑/etc/exports文件增加须要共享目录，每个目录的设置独占一行，编写格局如下：

NFS共享目录门路 客户机IP段(参数1,参数2,...,参数n)# 例子/u01 192.168.1.1/16(rw,sync,insecure,no_subtree_check,no_root_squash)

启动NFS服务

配置实现后，您能够在终端提示符后运行以下命令来启动 NFS 服务器：

sudo systemctl enable nfs-serversudo systemctl start nfs-server

查看NFS服务提供是否失常

到客户机上执行showmount命令进行查看

$ showmount -e <NFS服务器IP地址>Exports list on <NFS服务器IP地址>:/u01

装置 nfs-client-provisioner

增加choerodon chart仓库

helm repo add c7n https://openchart.choerodon.com.cn/choerodon/c7n/helm repo update

在任意一个master节点执行上面helm命令，装置nfs-client-provisioner

helm upgrade --install nfs-client-provisioner c7n/nfs-client-provisioner \    --set rbac.create=true \    --set persistence.enabled=true \    --set storageClass.name=nfs-provisioner \    --set persistence.nfsServer=127.0.0.1 \    --set persistence.nfsPath=/u01/prod \    --version 0.1.1 \    --namespace kube-system

域名解析

如果有域名，解析到服务器IP即可。没有域名则能够通过 coredns 的 hosts 插件配置。

编辑 coredns 的 ConfigMap，将域名替换成你本人的域名：

apiVersion: v1kind: ConfigMapdata:  Corefile: |    .:53 {        hosts {            192.168.56.11 charts.example.choerodon.io            192.168.56.11 minio.example.choerodon.io            192.168.56.11 gitlab.example.choerodon.io            192.168.56.11 registry.example.choerodon.io            192.168.56.11 sonarqube.example.choerodon.io            192.168.56.11 nexus.example.choerodon.io            192.168.56.11 api.example.choerodon.io            192.168.56.11 notify.example.choerodon.io            192.168.56.11 devops.example.choerodon.io            192.168.56.11 hzero.example.choerodon.io            192.168.56.11 app.example.choerodon.io            fallthrough        }    }

一键部署猪齿鱼

下载安装工具

在集群 master 执行上面的命令，先装置命令行工具 c7nctl：

curl -fsSL -o get_c7nctl.sh https://gitee.com/open-hand/c7nctl/raw/0.24/scripts/get-c7nctl.shchmod 700 get_c7nctl.sh./get_c7nctl.sh

配置文件

创立并编辑配置文件，批改域名为你本人的域名：

# vim config.yml--------------------version: 0.24metadata:  name: resource-choerodon  namespace: c7n-system  # 指定命名空间装置choerodonspec:  persistence:    storageClassName: nfs-provisioner  resources:    gitlab:      domain: gitlab.example.choerodon.io    minio:      domain: minio.example.choerodon.io    harbor:      domain: harbor.example.choerodon.io    chartmuseum:      domain: chart.example.choerodon.io    sonatype-nexus:      domain: nexus.example.choerodon.io    sonarqube:      domain: sonarqube.example.choerodon.io    choerodon-gateway:      domain: api.example.choerodon.io    choerodon-message:      domain: notify.example.choerodon.io    devops-service:      domain: devops.example.choerodon.io    choerodon-front-hzero:      domain: hzero.example.choerodon.io    choerodon-front:      domain: app.example.choerodon.io

执行装置

在装置过程中，会提醒设置某些组件用户名及明码，留神保留；执行部署命令，装置过程中如果遇到问题，请先查看本文最初一节对于常见问题的介绍，如果未能解决你的问题，能够到论坛中发问。

./c7nctl install c7n -c config.yml --version=0.24 --thin-mode

装置实现后您能够拜访您配置的choerodon-front域名，默认用户名和明码为admin/Admin@123!
登录一次Gitlab，第一次登录会提醒设置root用户明码，随后会跳转到Choerodon认证，应用admin/Admin@123!登录即可，如果应用root/admin用户拉取代码用户名为root，明码为界面设置的明码，其余用户创立后会通过站内信告诉Gitlab明码。

装置 Gitlab runner

如你应用一键部署装置的猪齿鱼，在同一集群中能够应用上面命令一键部署Gitlab-Runner。

./c7nctl install runner -c config.yml --version 0.24  --thin-mode

手动装置 runner 请参考官网文档。

对于猪齿鱼

Choerodon猪齿鱼开源全价值链多云麻利合作平台，是基于开源技术Kubernetes，Istio，knative，Gitlab，Spring Cloud来实现本地和云端环境的集成，实现企业多云/混合云应用环境的一致性。平台通过提供精益麻利、继续交付、容器环境、微服务、DevOps等能力来帮忙组织团队来实现软件的生命周期治理，从而更快、更频繁地交付更稳固的软件。