buildkit ctr 与 k3s的简单学习

摘要

前面一部分学习了 buildkit的简单搭建
也学习会了如果build images的简单处理
但是搭建镜像只是万里长征第一步.
如何进行微服务部署,才是关键的第二步.
公司最近使用基于K3S的K8S发行版
基于此 准备进行下一步的学习

---

简单结论

Buildkit 能够极大的减少镜像的大小
并且能够提高导入和导出的效率.

但是ctr 和 k3s ctr 虽然命名空间名字一样
但是没法打通, 需要找K3S的原厂沟通确认.

---

遇到的坑

我这边安装完buildkit 使用 ctr 命令
ctr ns ls
NAME     LABELS
buildkit
k8s.io
和安装完k3s 只有使用的命令
k3s ctr ns ls
NAME   LABELS
k8s.io
结果是完全不一样的
两个命令空间完全不相同
联系了下同事也没解决狗这个问题. 所以准备还是使用原始额导入导出的方式.

---

说明一下镜像信息

使用 docker build的OpenJDk的镜像大小为: 388MB
但是使用 buildkit 构建的镜像大小为: 167.4M
大小了巨大的缩减

同样的我们基于我们环境搭建的镜像:
[+] Building 642.9s (8/8) FINISHED
大小为:  2.5 GiB
但是用docker搭建的镜像为:
real    14m59.480s
大小为: 5.98 GB

注意两个机器的配置稍有不同.

---

执行导入和导出的速度

buildkit方式导出:
time ctr -n k8s.io i  export  /myapp/myapp2211.tar.gz  docker.io/library/myapp2211
real    1m35.661s
user    0m50.195s
sys     0m25.067s
总用量 2.5G

不同机器Docker方式导出:
#注意不能使用这种方式导出. K3S不认这种导出的介质
#time docker save myapp2211 |gzip > myapp2211.tar.gz
# 可以使用 -o 的方式来处理, 不能会报错:ctr: archive/tar: invalid tar header
time docker save myapp2211 -o myapp2211_docker.tar.gz
real    2m26.156s
user    0m2.280s
sys     0m5.578s
总用量 5.7G

---

K3S执行导入

导入 buildkit的镜像时间:
time k3s ctr i import /myapp/myapp2211.tar.gz
real    1m46.226s
user    0m11.998s
sys     0m4.479s

同一个机器导入 buildkit的镜像时间:
time k3s ctr images  import /myapp2211_docker.tar.gz
5.7G的镜像最终报错了. 原因不明.

---

构建deployment 进行验证

apiVersion: apps/v1
kind: Deployment
metadata:
  labels:
    app: myapp
  name: myapp-deployment
  namespace: default
spec:
  replicas: 1
  selector:
    matchLabels:
      app: myapp
  template:
    metadata:
      labels:
        app: myapp
    spec:
      containers:
      - image: docker.io/library/myapp2211
        imagePullPolicy: Never
        ports:
        - containerPort: 5200
        name: myapp

---

服务运行情况

kubectl apply -f myapp-deployment.yaml
kubectl get pods
NAME                                  READY   STATUS    RESTARTS   AGE
myapp-deployment-79cc44bbb5-wv9xc   1/1     Running   0          2m39s

kubectl logs -f  xxxxpods

运行信息
    PROCESSOR_ARCH:   ${PROCESSOR_ARCHITECTURE}
    JAVA_HOME:        /opt/java/openjdk
    JAVA_VERSION:     1.8.0_292
    IGIX_SERVER_HOME: ${XXXX_SERVER_HOME}
    SPRING BOOT:      2.4.13 (v2.4.13)
    ACTIVE PROFILES:  prod
    PROCESS ID:       1
    TotalMemorySize   ${TotalMemorySize}
    -------------------------------------------------------