20231125ks-installer追踪

用户1701

2023年12月2日修改

前置知识：kubectl、shell-operator、python、ansible、helm

从https://github.com/kubesphere/ks-installer/blob/20a6daa18adf10410a385b48ab2769e55d8bdee2/Dockerfile.complete#L8 我们可以看到主入口的程序来源是https://github.com/flant/shell-operator 这是一个运行在k8s集群中事件驱动脚本的工具。

根据https://github.com/flant/shell-operator/blob/55ca7a92c873cccfdad0c7591048eaeb8cf0dd4b/docs/src/HOOKS.md?plain=1#L11 描述shell-operator默认会递归扫描hooks目录下的文件把按文件的标准输出当作声明监听event

根据https://github.com/kubesphere/ks-installer/blob/20a6daa18adf10410a385b48ab2769e55d8bdee2/Dockerfile#L5 可知controller下的文件会被放到/hooks下作为监听，其中包括installerRunner.py

从 https://github.com/kubesphere/ks-installer/blob/20a6daa18adf10410a385b48ab2769e55d8bdee2/controller/installRunner.py#L30C12-L30C32 可知installRunner.py会在ClusterConfiguration创建或更新的时候被触发。

从 https://github.com/kubesphere/kubekey/blob/ffaa19f430a6b13aa219c7ec699fc2ea705c3a93/cmd/kk/pkg/kubesphere/modules.go#L101 可找到这个触发动作

TODO 待详细查看触发动作中yaml是如何传递kubesphere版本信息的

从 https://github.com/kubesphere/ks-installer/blob/20a6daa18adf10410a385b48ab2769e55d8bdee2/controller/installRunner.py#L338C41-L338C53 可以看到实际执行动作的是ansible，用的是https://ansible.readthedocs.io/projects/runner/en/stable/index.html

run方法文档https://ansible.readthedocs.io/projects/runner/en/stable/ansible_runner/#ansible_runner.interface.run

代码块

verbosity (int) – Control how verbose the output of ansible-playbook is​
_input (io.FileIO) – An optional file or file-like object for use as input in a streaming pipeline​
_output (io.FileIO) – An optional file or file-like object for use as output in a streaming pipeline​

TODO 从ansible playbook中找到kubesphere版本信息是哪个变量

TODO 确认从kubekey到ansible playbook的版本信息传递数据流

参考https://www.cnblogs.com/sylvia-liu/p/14933776.html强制覆盖entrypoint进去修改python

代码块

docker pull harbor.hylstudio.local/kubesphereio/ks-installer:v3.3.2​
docker run -it --entrypoint /bin/bash harbor.hylstudio.local/kubesphereio/ks-installer:v3.3.2​
cp /hooks/kubesphere/installRunner.py /hooks/kubesphere/installRunner.py.bak​
vi /hooks/kubesphere/installRunner.py​

进入shell修改python脚本

代码块

import io​
ansible_log=io.FileIO('/home/kubesphere/ansible.log', 'w')​
​
            _output=ansible_log,​
            verbosity=5​

重新打一个镜像v3.3.3

代码块

docker commit 5274b25c35d5 harbor.hylstudio.local/kubesphereio/ks-installer:v3.3.3​
docker push harbor.hylstudio.local/kubesphereio/ks-installer:v3.3.3​

安装虚机

代码块

./vm.sh -c 4 -m 8 -d 80 -p on k8s1​
./vm.sh -c 2 -m 4 -d 40 -p on k8s2​
./vm.sh -c 2 -m 4 -d 40 -p on k8s3​

分配域名

代码块

#dns config​
168.2.206 k8s-control.hylstudio.local​
168.2.206 k8s1.k8s.local​
168.2.177 k8s2.k8s.local​
168.2.203 k8s3.k8s.local​

强行修改ClusterConfiguration发现kk会报错，改回3.3.2先安装

代码块

apiVersion: installer.kubesphere.io/v1alpha1​
kind: ClusterConfiguration​
metadata:​
  name: ks-installer​
  namespace: kubesphere-system​
  labels:​
    version: v3.3.2​

尝试给v3.3.2替换成v3.3.3的内容，替换之前对v3.3.2备份

common.docs_name - LarkCCM_Docs_Menu_Image

20231125ks-installer追踪​

20231125ks-installer追踪