K8s部署:基于Ubuntu安装3 master节点k8s1.36.2+KubeSphere
本文以x86-ubuntu3节点为例部署最新k8s 1.36.2。1 说明关于ktkt是基于kk二次开发产物具备kk的所有功能二开重点适配了信创国产化环境。主要改进包括简化arm架构部署过程、支持国产化和国际环境在线、离线部署及一条命令所有节点初始化。支持arm64和amd64架构操作系统已适配芯片操作系统 如下CPU鲲鹏、飞腾、海光、兆芯、intel、amd 等。OSCentos、Ubuntu、Debian、银河麒麟V10、银河麒麟V11、麒麟国防版、麒麟信安、中标麒麟V7、统信UOS、华为欧拉、移动大云、阿里龙蜥、腾讯TencentOS等。注本文使用kt版本3.1.16由于k8s1.35.0需要内核5.10、cgroup V2以上版本若使用其他操作系统请谨慎操作。kt文档kt文档2.环境准备服务器基本信息主机名用途OS配置IPmaster1工作管理节点1harbor仓库Ubuntu24.044核8G192.168.85.170master2工作管理节点2Ubuntu24.044核8G192.168.85.143master3工作管理节点3Ubuntu24.044核8G192.168.85.1692.1 上传离线制品操作系统不需要安装docker,不需要设置selinux,swap等操作全新的操作系统即可。将离线制品、配置文件、kt和sh脚本上传至服务器其中一个节点(本文以master为例)后续在该节点操作创建集群。2.2 修改配置文件根据实际服务器信息配置到生成的config-sample.yaml中kind: Cluster metadata: name: sample spec: hosts: - {name: master1, address: 192.168.85.170, internalAddress: 192.168.85.170, user: root, password: 123213} - {name: master2, address: 192.168.85.143, internalAddress: 192.168.85.143, user: root, password: 123213} - {name: master3, address: 192.168.85.169, internalAddress: 192.168.85.169, user: root, password: 123213} roleGroups: etcd: - master1 - master2 - master3 control-plane: - master1 - master2 - master3 worker: - master1 - master2 - master3 # 如需使用 kk 自动部署镜像仓库请设置该主机组 建议仓库与集群分离部署减少相互影响 # 如果需要部署 harbor 并且 containerManager 为 containerd 时由于部署 harbor 依赖 docker建议单独节点部署 harbor registry: - master1 controlPlaneEndpoint: ## Internal loadbalancer for apiservers internalLoadbalancer: haproxy domain: lb.kubesphere.local address: port: 6443 kubernetes: version: v1.36.2 clusterName: cluster.local autoRenewCerts: true containerManager: containerd etcd: type: kubekey network: plugin: calico kubePodsCIDR: 10.233.64.0/18 kubeServiceCIDR: 10.233.0.0/18 ## multus support. https://github.com/k8snetworkplumbingwg/multus-cni multusCNI: enabled: false registry: type: harbor registryMirrors: [] insecureRegistries: [] privateRegistry: dockerhub.kubekey.local namespaceOverride: kubesphereio auths: # if docker add by docker login, if containerd append to /etc/containerd/config.toml dockerhub.kubekey.local: username: admin password: Harbor123 # 此处可自定义kk3.1.8新特性 skipTLSVerify: true # Allow contacting registries over HTTPS with failed TLS verification. plainHTTP: false # Allow contacting registries over HTTP. certsPath: /etc/docker/certs.d/dockerhub.kubekey.local addons: [] ---2.3 系统初始化解压kt-amd64.tar.gz文件后执行./kt init-os -f config-sample.yaml已适配操作系统和架构见1.说明该命令kt会根据配置文件自动判断操作系统和架构以完成所有节点的初始化配置和依赖安装。3 创建 Harbor私有仓库3.1 创建镜像仓库./kt init registry -f config-sample.yaml -a artifact-amd-k8s1362-ks3.4.1.tar.gz此命令会在harbor节点自动安装docker和docker-compose3.2 创建harbor项目说明Harbor 管理员账号admin密码Harbor123。密码同步使用配置文件中的对应password创建 Harbor 项目chmod x create_project_harbor.sh ./create_project_harbor.sh4 创建k8sks./kt create cluster -f config-sample.yaml -a artifact-amd-k8s1362-ks3.4.1.tar.gz --with-local-storage此命令kt会自动将离线制品中的镜像推送到harbor私有仓库执行后会有如下提示,输入yes/y继续执行等待一会可以看到等待安装完成的箭头继续等待一段时间最终可以看到安装成功的消息5 验证登录页面集群管理集群节点监控告警集群信息5 总结本文主要以离线方式部署适用于在线和离线两种状态而如果在线状态那么步骤3可忽略两条命令即可搞定。不论x86还是arm不论在线还是离线不论国际还是国产操作系统使用kt工具和对应的离线安装包安装k8s和kubesphere 一如既往的快和简单。