背景:
不晓得各位有没有我这种难堪:kubernetes搭建过程中须要拉取到一些镜像,比方: dockerhub的镜像,这个还好。毕竟有加速器。but k8s.gcr.io,quay.io.这些怎么搞?刚巧搭建kubeadm 1.25,helm装置cilium的时候悲摧了。下载不动怎么搞?docker时代的时候我还能够间接导入,然而containerd时代了 导入了还是要麻烦一些阿?搜索引擎搜了一下,找到上面三个文章,借鉴一下!
参照:搭建Docker镜像仓库代理
搭建容器仓库的镜像服务器(gcr, ghcr, quay, k8s-gcr)
真◉彻底解决 gcr、quay、DockerHub 镜像下载难题!
搭建镜像代理仓库
其中米开朗基杨大佬写的真◉彻底解决 gcr、quay、DockerHub 镜像下载难题!搭建一个k3s集群搞比拟全国,然而我国外服务器就一台,还是轻量级的服务器....开始就是下载镜像而后上传到国内harbor仓库的......这里就用搭建Docker镜像仓库代理的形式去操作了!
前提条件
服务器在国外
四个域名 以及ssl证书
装置Docker
留神:我这台服务器为轻量服务器,ubuntu操作系统(docker我之前其实早装置了......)
apt-get updateapt-get upgradeapt-get install docker*
如果是centos 请参照:
yum update yum install -y yum-utils device-mapper-persistent-data lvm2 yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repoyum install -y docker-ce
配置Docker
- 设置 Docker 的日志格局为 json,日志文件大小为 100M,最多保留 3 个日志;
- 设置 Docker 镜像公有仓库和官网镜像减速地址;
- 设置 Docker 的数据目录到 /data/docker;
设置 Docker 的 Storage Driver 为 overlay2。
[root@dqzboy ~]# mkdir /etc/docker[root@dqzboy ~]# cat << EOF > /etc/docker/daemon.json{ "log-driver": "json-file", "log-opts": { "max-size": "100m", "max-file": "3" }, "insecure-registry": [ "hub.dqzboy.com" ], "registry-mirror": "https://a7ye1cuu.mirror.aliyuncs.com", "data-root": "/data/docker", "exec-opts": ["native.cgroupdriver=systemd"], "storage-driver": "overlay2", "storage-opts": [ "overlay2.override_kernel_check=true" ]}EOF
启动 Docker
systemctl enable docker && systemctl start docker
装置 Docker Compose
看版本吧,我没有装置什么最新的 ,毕竟能跑起来就能够对我来说
curl -L "https://github.com/docker/compose/releases/download/1.29.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-composechmod +x /usr/local/bin/docker-composeln -s /usr/local/bin/docker-compose /usr/bin/docker-composedocker-compose --version
启动镜像仓库代理git clone 相干registry-proxy仓库配置文件
git clone https://github.com/findsec-cn/registry-proxy.git cd registry-proxy
自定义批改配置文件
- 将域名的证书搁置到 cert 目录下,并把证书文件名称命名为该目录下的server名称;
- 其中 server.crt 为 ssl 证书文件, server.key 为 ssl 私钥。
- 留神:证书肯定要是对应域名的,不然进行下载镜像会提醒x509
批改 nginx.conf 配置文件,将配置文件中的域名替换成本人的域名(xxx.com)
docker-compose.yaml批改
我这里先批改以下docker-compose.yaml,原github我的项目只代理了gcr.io,k8s.gcr.io,恩我这里次要是应用代理quay.io仓库,如果代理其余仓库可相似办法!
version: '2'services: local: container_name: reg-local image: findsec/registry-proxy:latest restart: always environment: - DELETE_ENABLED=true volumes: - ~/data/registry:/var/lib/registry ports: - 5000:5000 networks: - registry-net quay: container_name: reg-quay image: findsec/registry-proxy:latest restart: always environment: - PROXY_REMOTE_URL=https://quay.io volumes: - ~/data/registry:/var/lib/registry networks: - registry-net gcr: container_name: reg-gcr image: findsec/registry-proxy:latest restart: always environment: - PROXY_REMOTE_URL=https://gcr.io volumes: - ~/data/registry:/var/lib/registry networks: - registry-net k8s-gcr: container_name: reg-k8s-gcr image: findsec/registry-proxy:latest restart: always environment: - PROXY_REMOTE_URL=https://k8s.gcr.io volumes: - ~/data/registry:/var/lib/registry networks: - registry-net ui: container_name: reg-ui image: findsec/registry-ui:latest restart: always links: - local:reg-local environment: - REGISTRY_TITLE=My Private Docker Registry - REGISTRY_URL=http://reg-local:5000 - DELETE_IMAGES=true networks: - registry-net nginx: container_name: reg-nginx image: nginx:alpine restart: always ports: - 80:80 - 443:443 links: - ui:reg-ui - gcr:reg-gcr - quay:reg-quay - k8s-gcr:reg-k8s-gcr volumes: - ./nginx.conf:/etc/nginx/conf.d/default.conf - ./cert:/etc/nginx/ssl networks: - registry-netnetworks: registry-net:
依着葫芦画瓢。依据仓库中yaml文件中gcr配置 生成一个quay的配置:
nginx相干配置中link也增加上quay配置:批改nginx.conf中域名:
sed -i 's/xxx.com/zhangpeng.com/g' nginx.conf
增加quay域名相干配置:
最终配置文件如下:server { listen 80; listen 443 ssl; server_name hub.zhangpeng.com; proxy_connect_timeout 600; proxy_send_timeout 600; proxy_read_timeout 600; send_timeout 600; ssl_certificate /etc/nginx/ssl/server.crt; ssl_certificate_key /etc/nginx/ssl/server.key; location / { proxy_pass http://reg-ui:80; proxy_buffering off; proxy_request_buffering off; }}server { listen 80; listen 443 ssl; server_name gcr.zhangpeng.com; proxy_connect_timeout 600; proxy_send_timeout 600; proxy_read_timeout 600; send_timeout 600; ssl_certificate /etc/nginx/ssl/server.crt; ssl_certificate_key /etc/nginx/ssl/server.key; location / { proxy_pass http://reg-gcr:5000; proxy_buffering off; proxy_request_buffering off; }}server { listen 80; listen 443 ssl; server_name k8s-gcr.zhangpeng.com; proxy_connect_timeout 600; proxy_send_timeout 600; proxy_read_timeout 600; send_timeout 600; ssl_certificate /etc/nginx/ssl/server.crt; ssl_certificate_key /etc/nginx/ssl/server.key; location / { proxy_pass http://reg-k8s-gcr:5000; proxy_buffering off; proxy_request_buffering off; }}server { listen 80; listen 443 ssl; server_name quay.zhangpeng.com; proxy_connect_timeout 600; proxy_send_timeout 600; proxy_read_timeout 600; send_timeout 600; ssl_certificate /etc/nginx/ssl/server.crt; ssl_certificate_key /etc/nginx/ssl/server.key; location / { proxy_pass http://reg-quay:5000; proxy_buffering off; proxy_request_buffering off; }}
ssl证书
肯定记得要上传ssl证书到cert目录下:
当然了你也能够批改docker-compose.yaml.批改nginx中volumes中挂载门路
也能够批改nginx.conf文件中ssl_certificate ssl_certificate_key 文件名:启动镜像仓库代理
docker-compose up -ddocker-compose logs -f
可能会呈现证书配置不对的报错,哈哈哈本人解决以下.....
解析域名
我的域名用的dnspod
应用镜像仓库代理
本地工作环境为rocky 8.5装置了podman 应用podman进行测试:
###要下载镜像[root@zhangpeng ~]# podman pull k8s.gcr.io/pause:3.6###通过镜像仓库代理形式下载:[root@zhangpeng ~]# podman pull k8s-gcr.zhangpeng.com/pause:3.6
拜访hub.zhangpeng.com。能够看到咱们下载的镜像被缓存了接下来能够进阶的:
image的清理
不能始终缓存吧,空间写满了怎么办,最苯的办法写一个crontab:
/2 /usr/bin/rm -rf /var/lib/registry/ &>/dev/null
## 防白嫖认证服务器镜像代理被白嫖怎么办?最简略的搞一个htpasswd搞一下:
apt-get install apache2-utils

htpasswd -c passwd zhangpeng
而后批改nginx.conf文件,我这里为了演示只批改了k8s-gcr这一个的相干配置,其余的都如此就能够:
server {
listen 80;
listen 443 ssl;server_name k8s-gcr.zhangpeng.com;
proxy_connect_timeout 600;
proxy_send_timeout 600;
proxy_read_timeout 600;
send_timeout 600;ssl_certificate /etc/nginx/ssl/server.crt;
ssl_certificate_key /etc/nginx/ssl/server.key;
auth_basic "请输出用户和明码"; # 验证时的提示信息
auth_basic_user_file /etc/nginx/passwd; # 认证文件
location / {proxy_pass http://reg-k8s-gcr:5000; proxy_buffering off; proxy_request_buffering off;
}
}重启docker-compose服务:注:以后registry目录下
docker-compose down
docker-compose up -d本地测试:还拿pause镜像为例,恩显示认证失败了
podman pull k8s-gcr.zhangpeng.com/pause:3.5

podman login k8s-gcr.zhangpeng.com
podman pull k8s-gcr.zhangpeng.com/pause:3.5如下图,pull胜利:## 其余的?容器运行时配置的配置,参照米开朗基杨大佬:[https://blog.csdn.net/alex_yangchuansheng/article/details/113855809#t10](https://blog.csdn.net/alex_yangchuansheng/article/details/113855809#t10)