升级docker 重启所有node docker服务 造成 c7n服务起不来

Choerodon User Guide
#1

  • Choerodon平台版本：0.13

  • 运行环境：自主搭建

  • 问题描述：
    重启docker服务造成 c7n服务起不来

    请尽量详细的描述您遇到的问题，以便我们能更快速的提供解决办法。
    [root@by-deploy01 ~]# kubectl get pod -n c7n-system |grep -v Completed
    NAME READY STATUS RESTARTS AGE
    agile-service-68cf5fb596-l7txn 0/1 CrashLoopBackOff 2 2m
    api-gateway-b9d55dc7b-drl76 0/1 CrashLoopBackOff 8 19d
    asgard-service-8549475cc9-6ctnm 0/1 CrashLoopBackOff 3 2m
    c7n-mysql-5df4796b79-87znn 1/1 Running 1 19d
    c7n-redis-6468bf6c9f-zpfbg 1/1 Running 1 19d
    chartmuseum-chartmuseum-5cbdfc7444-nzzfw 1/1 Running 1 19d
    choerodon-front-7d96c86cf4-bgfc7 1/1 Running 1 17d
    config-server-68c6f44dd5-ds96p 1/1 Running 0 8m
    devops-service-699cc6fbf6-x95cn 0/1 CrashLoopBackOff 8 19d
    file-service-57d5cbc8bd-kx5f7 0/1 Error 5 6m
    gateway-helper-5f65fb65fc-9gvl9 0/1 CrashLoopBackOff 3 3m
    gitlab-85c879d99d-fjjsc 0/1 Running 5 17d
    gitlab-mysql-b45b864bd-gkhc7 1/1 Running 2 19d
    gitlab-redis-77dbbc5875-cwmkp 1/1 Running 2 19d
    gitlab-service-c97f8697-r29cb 0/1 Running 2 1m
    iam-service-856f59c5db-sxk4h 0/1 CrashLoopBackOff 3 3m
    issue-service-59cb5759c9-mffpf 0/1 Running 2 1m
    manager-service-5dc679cb55-gvhbl 0/1 CrashLoopBackOff 3 3m
    minio-69697cb499-jn2nv 1/1 Running 1 19d
    notify-service-5794ddcdbc-nlpd8 0/1 CrashLoopBackOff 4 4m
    oauth-server-7df67ffb6c-8sv69 0/1 Error 4 4m
    register-server-85d4fc548c-lp2vv 1/1 Running 1 19d
    runner-84bbcd4888-x748m 1/1 Running 1 17d
    state-machine-service-5ddc64d4fd-57zvl 0/1 Running 5 5m
    test-manager-service-59f59574b-sjrk2 0/1 CrashLoopBackOff 4 4m
    wiki-service-5645f5b746-2t6bz 0/1 CrashLoopBackOff 4 5m
    xwiki-78845ccbd4-28bnd 1/1 Running 1 16d
    [root@by-deploy01 ~]#

  • 执行的操作：
    是不是服务依赖的问题 我逐个删除失败的pod 还是不行 这种情况如何恢复

  • 报错信息(请尽量使用代码块的形式展现)：

  • 建议：

    提出您认为不合理的地方，帮助我们优化用户操作

#2

Hi,目前我们正在测试处理runc的问题，Kubernetes对docker版本有一些限制，直接升级可能导致集群出现问题。