爱意满满的作品展示区。
rayingecho

分享一个自己开发的 Kubernetes 排障新姿势: kubectl-debug

  •  
  •   rayingecho ·
    aylei · Dec 22, 2018 · 4951 views
    This topic created in 2883 days ago, the information mentioned may be changed or developed.

    之前在公司里有过一场讨论: 业务容器里要不要装上 netstat, tcpdump, 乃至 arthas 这样的排障工具.

    一派信奉 docker 哲学: 容器镜像要精简, 要 immutable, 装各种排障工具这种属于虚拟机时代的伪需求. 再说了, 你要更新一个排障工具或者 debug 脚本, 得动所有业务镜像, 成何体统?

    一派践行实用主义: 哲学不哲学的都不能赚钱, 我们就关心线上出了问题工程师能不能用最熟悉, 最顺手的方案定位问题解决问题, 搞那么多花里胡哨的没用. 预装几个 binary 和脚本, 能解决问题就是好的!

    从那时起我就想做今天这个项目了, 而在机缘巧合之下, 今天真的把解决方案做了出来: kubectl-debug

    简单说: kubectl-debug 是一个 kubectl 插件, 支持用户用 kubectl debug POD_NAME 这样的指令, 对指定 Pod 中的目标容器进行 debug. 它的背后其实就是帮用户启动了一个新容器, 并且加入到目标容器的 pid,user, network 以及 ipc namespace 中, 这时新容器当中的各种排障工具和脚本就可以用起来了. 而与此同时, 所有的业务容器不需要预装任何其它工具.

    做完之后自己用了一下, 确实舒服了很多, 尤其是很多早期的业务容器, 用的 alpine 当基础镜像, 啥都没有, 要 debug 的时候先进去 apk add 一波是真的苦...

    最后附上 github 主页, 欢迎大家试用反馈😁

    13 replies  •  2018-12-25 19:49:53 +08:00
    kidlj
    kidlj
    Dec 22, 2018 via iPhone
    1
    nice,收藏
    hengyunabc
    hengyunabc
    Dec 22, 2018
    2
    arthas 好评:) arthas 最近加了 docker 的支持: https://alibaba.github.io/arthas/docker.html
    rayingecho
    rayingecho
    OP
    Dec 22, 2018
    3
    @kidlj
    感谢鼓励
    rayingecho
    rayingecho
    OP
    Dec 22, 2018
    4
    @hengyunabc
    大佬好! 我们已经把 arthas 放进了 java 的基础镜像里, 确实很好用~
    privil
    privil
    Dec 23, 2018
    5
    有意思,感谢分享!
    choury
    choury
    Dec 23, 2018 via Android
    6
    为啥不用 nsenter ?
    firefox12
    firefox12
    Dec 24, 2018 via iPhone
    7
    能安利一下 这个录屏并转成 gif 的软件或过程吗?
    rayingecho
    rayingecho
    OP
    Dec 24, 2018
    8
    @choury
    哈哈, 本质上做的事情确实就是 nsenter, 只不过:
    1. 包装成了一条 kubectl 命令, 更加简洁, 免去了中间的远程执行和找 target containerId 的步骤
    2. 通过起新镜像, 解决了脚本和排障工具的安装维护问题, 这正是 docker 的强项
    rayingecho
    rayingecho
    OP
    Dec 24, 2018
    9
    @firefox12
    用的 gifox for mac, 具体可以自行 gg 蛤
    rayingecho
    rayingecho
    OP
    Dec 24, 2018
    10
    @privil
    感谢鼓励!
    ooeyunarika
    ooeyunarika
    Dec 24, 2018
    11
    好东西,感谢分享!
    firefox12
    firefox12
    Dec 24, 2018
    12
    @rayingecho 谢谢
    abmin521
    abmin521
    Dec 25, 2018 via Android
    13
    666
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1050 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 33ms · UTC 23:22 · PVG 07:22 · LAX 15:22 · JFK 18:22
    ♥ Do have faith in what you're doing.