信创：arm架构基于欧拉 25.03系统安装k8s1.36.3+ks完整实战指南-天行1st的博客

从Kubernetes 1.35版本起，动态资源分配（DRA）正式升级为GA稳定特性，彻底补齐了GPU、NPU等异构硬件的精细化管理短板。在AI算力需求爆发的当下，部署一套1.35+版本集群，已经成为AI基础设施建设的高性价比选择。本文使用最新版kt在openEuler 新系统下使用三条命令，部署k8s 1.36.3+ks4.1.3。

1 说明

kt文档：kt文档
离线制品：离线包

关于kt

kt是基于kk二次开发产物，本次升级至3.2.1版本，证书有效期100年。新增多项功能，并优化了部署步骤，现在部署k8s只需要两条命令，部署ks3.4.1版本也是两条命令。

注：本文使用kt版本3.2.1，由于k8s1.35.0需要内核5.10、cgroup V2以上版本，若使用其他操作系统，请谨慎操作。

2.环境准备

服务器基本信息

主机名	用途	OS	架构	配置	IP
harbor	私有仓库	欧拉25.03	arm64	2核4G	192.168.85.143
node1	工作管理节点1	欧拉25.03	arm64	2核4G	192.168.85.171

2.1 上传离线制品

操作系统不需要安装docker,不需要设置selinux,swap等操作，全新的操作系统即可。建议使用全新操作系统！

将离线制品、配置文件和 kt上传至服务器其中一个节点(本文以node1为例)，后续在该节点操作创建集群。

2.2 修改配置文件

根据实际服务器信息，配置到生成的config-sample.yaml中

kind: Cluster
metadata:
  name: sample
spec:
  hosts:
  - {name: harbor, address: 192.168.1.79, internalAddress: 192.168.1.79, user: root, password: "123213"，arch: arm64}
  - {name: node1, address: 192.168.1.136, internalAddress: 192.168.1.136, user: root, 
password: "123213"，arch: arm64}
  roleGroups:
    etcd:
    - node1
    control-plane:
    - node1
    worker:
    - node1
    # 如需使用 kk 自动部署镜像仓库，请设置该主机组 （建议仓库与集群分离部署，减少相互影响）
    # 如果需要部署 harbor 并且 containerManager 为 containerd 时，由于部署 harbor 依赖 docker，建议单独节点部署 harbor
    registry:
    - harbor
  controlPlaneEndpoint:
    ## Internal loadbalancer for apiservers 
    internalLoadbalancer: haproxy

    domain: lb.kubesphere.local
    address: ""
    port: 6443
  kubernetes:
    version: v1.36.3
    clusterName: cluster.local
    autoRenewCerts: true
    containerManager: containerd
  etcd:
    type: kubekey
  network:
    plugin: calico
    kubePodsCIDR: 10.233.64.0/18
    kubeServiceCIDR: 10.233.0.0/18
    ## multus support. https://github.com/k8snetworkplumbingwg/multus-cni
    multusCNI:
      enabled: false
  registry:
    type: harbor
    registryMirrors: []
    insecureRegistries: []
    privateRegistry: "dockerhub.kubekey.local"
    namespaceOverride: "kubesphereio"
    auths: # if docker add by `docker login`, if containerd append to `/etc/containerd/config.toml`
      "dockerhub.kubekey.local":
        username: "admin"
        password: Harbor@123 # 此处可自定义，kk3.1.8新特性
        skipTLSVerify: true # Allow contacting registries over HTTPS with failed TLS verification.
        plainHTTP: false # Allow contacting registries over HTTP.
        certsPath: "/etc/docker/certs.d/dockerhub.kubekey.local"
  addons: []

3 创建 Harbor私有仓库

3.1 创建镜像仓库

./kt init registry -f config-sample.yaml -a artifact-arm-k8s1363-ks413.tar.gz

此命令会在harbor节点自动安装docker和docker-compose，添加证书信用链并创建需要存放镜像的项目。

等待一会可以看到所有操作执行成功

4 创建k8s集群

./kt create cluster -f config-sample.yaml -a artifact-arm-k8s1363-ks413.tar.gz

此命令kt会自动初始化所有节点，并将离线制品中的镜像推送到harbor 私有仓库。

注：若节点数量非常多，可执行./kt init-os -f config-sample.yaml，有失败可多执行几次再执行创建集群。

执行后会有如下提示,输入yes/y继续执行

接着看到部署失败日志：

提示，当前cgroup版本需要v2版本

4.1 修改cgroup版本

由于openEuler 25.03默认cgroup v1版本，而k8s1.35+要求v2版本，需要调整它的版本

vi /etc/default/grub

修改 GRUB_CMDLINE_LINUX 行，在引号内部末尾添加参数systemd.unified_cgroup_hierarchy=1

重新生成GRUB配置

grub2-mkconfig -o /boot/grub2/grub.cfg
#如果是UEFI启动则
grub2-mkconfig -o /boot/efi/EFI/openeuler/grub.cfg

#重启系统
reboot

重启后验证

mount | grep cgroup

4.2 重新部署

./kt create cluster -f config-sample.yaml -y

此时不需要再加-a，并且使用了-y，跳过确认，直接部署

等待一段时间最终可以看到安装成功的消息

验证

5 安装KubeSphere

helm upgrade --install -n kubesphere-system --create-namespace ks-core ks-core-1.1.5.tgz \
     --set global.imageRegistry=dockerhub.kubekey.local/ks \
     --set extension.imageRegistry=dockerhub.kubekey.local/ks \
     --set ksExtensionRepository.image.tag=v1.1.6 \
     --debug \
     --wait

等待一会看到成功的消息