https://kubeservice.cn/ Recent content on Kubeservice博客 Hugo -- gohugo.io en-us Wed, 23 Apr 2025 00:00:00 +0000 https://kubeservice.cn/2026/03/02/ai-openclaw-1/ Mon, 02 Mar 2026 00:00:00 +0000 https://kubeservice.cn/2026/03/02/ai-openclaw-1/ 一、在Github上免费薅羊毛，创建云端CodeSpace(Cloud Workspace) 首先，在您自己的github账号下，创建一个repositories https://kubeservice.cn/2025/12/02/ai-nvidai-a800-nvlink/ Tue, 02 Dec 2025 00:00:00 +0000 https://kubeservice.cn/2025/12/02/ai-nvidai-a800-nvlink/ 现象 业务使用PyTorch训练任务时，在一台A800节点上，出现: import torch torch.cuda.is_available() 会出现 RuntimeError: Unexpected error from cudaGetDeviceCount().梃cuda functions https://kubeservice.cn/2025/10/15/fault-k8s-pod-status-fail/ Wed, 15 Oct 2025 00:00:00 +0000 https://kubeservice.cn/2025/10/15/fault-k8s-pod-status-fail/ TIPS之 集群中大量Pod处于UnexpectedAdmissionError状态排查 现象 查询集群中的Pod时，发现大量Pod实例处于Une https://kubeservice.cn/2025/04/23/application-cloudnative-transformation/ Wed, 23 Apr 2025 00:00:00 +0000 https://kubeservice.cn/2025/04/23/application-cloudnative-transformation/ 应用云原生改造要素 一、什么是云原生应用？如何云原生改造？ 应用云原生是一种架构设计理念。 可生于云、可长于云，不被云锁定，并充分利用云平台的弹性 https://kubeservice.cn/2025/14/14/ai-nvidai-env/ Mon, 14 Apr 2025 00:00:00 +0000 https://kubeservice.cn/2025/14/14/ai-nvidai-env/ NVIDAI GPU 相关环境变量 1. nvidia-container-runtime OCI规范 环境变量 参数说明 描述 NVIDIA_VISIBLE_DEVICES 0,1,2或者GPU-fef8089b,GPU-edab347b或者all或者none 此 https://kubeservice.cn/2025/03/13/fault-volcano-jobflow-status-confusion/ Thu, 13 Mar 2025 00:00:00 +0000 https://kubeservice.cn/2025/03/13/fault-volcano-jobflow-status-confusion/ Volcano jobflow 状态混乱排查 背景 当多个 JobFlow 并发执行且都引用同一个 JobTemplate 模板时，每个 JobFlow 状态中出现多个 JobFlow 和多个 VcJob 信息是比较常见的情况，以下为你详细解释： 多个 JobFlow 信息 https://kubeservice.cn/2025/03/06/ai-deepseek-resources/ Thu, 06 Mar 2025 00:00:00 +0000 https://kubeservice.cn/2025/03/06/ai-deepseek-resources/ Deepseek部署所需资源统计 模型型号 模型大小 格式 精度 上下文长度 最低显存需求 显卡要求 DeepSeek-R1 671B（真满血版本） 720GB safetensors（支持 https://kubeservice.cn/2025/02/14/ai-modelx-hub/ Fri, 14 Feb 2025 00:00:00 +0000 https://kubeservice.cn/2025/02/14/ai-modelx-hub/ 基于kubegems/modelx实现开源模型仓库: modelx 2.0 一、为什么要自己设计模型仓库 目前 大模型 各个平台(例如： ollama、 huggingface hub、 modelscope) 基本 https://kubeservice.cn/2025/02/13/huggingface-cli-dataset-model-managerment/ Thu, 13 Feb 2025 00:00:00 +0000 https://kubeservice.cn/2025/02/13/huggingface-cli-dataset-model-managerment/ huggingface 数据集/模型库 上传和下载 环境准备 云原生时代，golang为王； 而AI时代，Python为王。 需要安装Python相关的环境和libary包 https://kubeservice.cn/2025/02/12/ai-ollama-vs-vllm-vs-SGLang/ Wed, 12 Feb 2025 00:00:00 +0000 https://kubeservice.cn/2025/02/12/ai-ollama-vs-vllm-vs-SGLang/ 模型推理服务部署管理 - 模型版本、模型启动、openai接口标准提供 模型推理部署工具 模型部署，类似与docker可以方便的类似于docker run https://kubeservice.cn/2025/01/23/k8s-code-generator/ Thu, 23 Jan 2025 00:00:00 +0000 https://kubeservice.cn/2025/01/23/k8s-code-generator/ Kubernetes 代码生成教程: code-generator 和 controller-tools 一、概念简介 1.1 code-generator k8s.io/client-go 提供了对k8s原生资源的informer和clientset等等，但对于自定义资源的操作则相对低效， https://kubeservice.cn/2025/01/17/fault-k8s-exit-code/ Fri, 17 Jan 2025 00:00:00 +0000 https://kubeservice.cn/2025/01/17/fault-k8s-exit-code/ Kubernetes Etcd 启动失败问题排查 问题 大家在使用 Kubernetes 时，会遇到创建Pod失败，这时会分析什么原因导致创建Pod失败？ Pod status 状态解释 [1] CrashLoopBack https://kubeservice.cn/2025/01/06/k8s-network-design/ Mon, 06 Jan 2025 00:00:00 +0000 https://kubeservice.cn/2025/01/06/k8s-network-design/ 技术方案之 Kubernetes大规模容器网络优化 背景 1.1 大规模集群特点 大业务：单模块超大规模副本（300+） 小业务：资源减少边际成本（平摊控制 https://kubeservice.cn/2025/01/03/my-github-2024/ Fri, 03 Jan 2025 00:00:00 +0000 https://kubeservice.cn/2025/01/03/my-github-2024/ 2024年度社区贡献集合  Kernel 5.4.x Kubernetes >= 1.10 GCC 版本 >= 9.3.1 NVIDAI device >= 384.81 Runtime 支持 nvidia-container-toolkit >= 1.7.0 cuda版本与 NVIDAI device 匹配 GPU Node 更新步骤 第一步. 出现GPU https://kubeservice.cn/2024/11/12/k8s-etcd-ha/ Tue, 12 Nov 2024 00:00:00 +0000 https://kubeservice.cn/2024/11/12/k8s-etcd-ha/ Kubernetes etcd 高可用实现方式 一. 继承上一章节 单集群etcd性能调优 超大规模Kubernetes集群调优 1.1 现象和挑战 现象1: 全量数据range问题：et https://kubeservice.cn/2024/11/11/k8s-coredns-autoscaling/ Mon, 11 Nov 2024 00:00:00 +0000 https://kubeservice.cn/2024/11/11/k8s-coredns-autoscaling/ CoreDNS DNS集群粒度 autoscaling 第一篇： 使用 NodeLocal DNSCache 提高 clusterDNS 性能和可靠性 一、什么是集群比例自动扩缩器 (Cluster Proportional Autoscaler即CPA) ？ 集群比例自动扩缩器 (CPA) 是一 https://kubeservice.cn/2024/10/25/k8s-custom-metrics-hpa/ Fri, 25 Oct 2024 00:00:00 +0000 https://kubeservice.cn/2024/10/25/k8s-custom-metrics-hpa/ Kubernetes 自定义指标hpa实现：prometheus-adapter 如何实现自定义指标采集 其中包括： 自定义指标暴露，并采集 完成将原生自定义指标转换为 https://kubeservice.cn/2024/10/23/devops-logging-performance/ Wed, 23 Oct 2024 00:00:00 +0000 https://kubeservice.cn/2024/10/23/devops-logging-performance/ 存储引擎介绍 elasticsearch 不多介绍 loki Promtail 采集器， 通过daemonset方式部署在全部node上。 通过promtail中 configmap 配置两个东西： a.配置固定路径下的 https://kubeservice.cn/2024/10/09/k8s-dual-stack/ Wed, 09 Oct 2024 00:00:00 +0000 https://kubeservice.cn/2024/10/09/k8s-dual-stack/ Kubernetes IPv4/IPv6 双协议栈 背景 “Kubernetes 何时支持 IPv6” 自从 k8s v1.9 版本中首次添加对 IPv6 的 alpha 支持以来，这个问题的讨论越来越频繁。 虽然 Kubernetes 从 v1.18 版本开始 https://kubeservice.cn/2024/10/08/fault-k8s-serviceaccount-not-auto-gen-secret/ Tue, 08 Oct 2024 00:00:00 +0000 https://kubeservice.cn/2024/10/08/fault-k8s-serviceaccount-not-auto-gen-secret/ Kubernetes ServiceAccount 无法生成 token Secret排查 1. 现象 创建 ServiceAccount 不会自动生成 Secret 需要对其手动创建 cat<<EOF | kubectl apply -f - apiVersion: v1 kind: ServiceAccount metadata: name: test namespace: default EOF $ kubectl get serviceaccounts cby NAME SECRETS AGE test 0 9s 2. 排查思路 手动 https://kubeservice.cn/2024/07/31/ceph-fs-conf/ Wed, 31 Jul 2024 00:00:00 +0000 https://kubeservice.cn/2024/07/31/ceph-fs-conf/ 一、网卡调优 二、OS内核调优 默认值：60 现象：用到swap时性能明显下降 修改建议：关闭swap内存的使用，将该参数设定为0 $ sudo sysctl vm.swappiness=0 默认值：3 https://kubeservice.cn/2024/07/26/tip-k8s-pod-anti-affinity/ Fri, 26 Jul 2024 00:00:00 +0000 https://kubeservice.cn/2024/07/26/tip-k8s-pod-anti-affinity/ Kubernetes Pod 均匀分布在各节点上 背景 线上单个deployment副本数有100个， Node节点有十几个。问题是：有部分节点部署了30+个pod副本数， https://kubeservice.cn/2024/07/10/nova-computer-cpu/ Wed, 10 Jul 2024 00:00:00 +0000 https://kubeservice.cn/2024/07/10/nova-computer-cpu/ 1. 背景 Nova Scheduler调度： 由于ECS是vCPU超卖的，因此如果调度在同一 的pCPU上，会引起调度异常导致创建资源异常； ECS在使用过程 https://kubeservice.cn/2024/07/03/yum-install-error/ Wed, 03 Jul 2024 00:00:00 +0000 https://kubeservice.cn/2024/07/03/yum-install-error/ CentOS7 停止维护，yum源失效更改国内源地址 背景 2020年12月08日，CentOS官方宣布了停止维护CentOS的计划，并推出了CentOS St https://kubeservice.cn/2024/06/24/fault-k8s-pod-container-memory-high/ Mon, 24 Jun 2024 00:00:00 +0000 https://kubeservice.cn/2024/06/24/fault-k8s-pod-container-memory-high/ Kubernetes Pod Container Memory high问题排查 1. 现象 线上k8s集群报警，告警群里突然告警某容器内存使用率高于90%，并且后续一直有告警出现。随即登入指标监控系统查 https://kubeservice.cn/2024/06/11/devops-k8s-container-logging/ Tue, 11 Jun 2024 00:00:00 +0000 https://kubeservice.cn/2024/06/11/devops-k8s-container-logging/ Kubenetes 容器日志收集方案 应用日志收集痛点 业务无要求: div.notices { margin: 2rem 0; position: relative; } div.notices p { padding: 15px; white-space: pre-wrap; display: block; margin-top: 0rem; margin-bottom: 0rem; color: #666; } div.notices p:first-child:before { position: absolute; top: 2px; color: #fff; font-family: "Font Awesome 5 Free"; font-weight: 900; content: "\f06a"; left: 10px; } div.notices p:first-child:after https://kubeservice.cn/2024/06/05/fault-k8s-pod-schedule-not-balance/ Wed, 05 Jun 2024 00:00:00 +0000 https://kubeservice.cn/2024/06/05/fault-k8s-pod-schedule-not-balance/ Kubernetes CPUSet Pod 在各节点上numa分布不均 背景 在 CPU Manager 管理的CPU亲和过程中，发现有部分机器numa空闲， 但是有部分机器Pod在 binding过程中，一 https://kubeservice.cn/2024/05/29/k8s-auto-delete-failed-pods/ Wed, 29 May 2024 00:00:00 +0000 https://kubeservice.cn/2024/05/29/k8s-auto-delete-failed-pods/ Kubernetes 自动清理 Failed/Successed Pod 背景 Pod 部署应为某些原因，Pod 部署失败Failed 或者 部署完成Successed等历史pod 不会被删除，导致 kubectl get pod -A 大量异常p https://kubeservice.cn/2024/05/16/fault-numa-topo-and-too-many-open-files/ Thu, 16 May 2024 00:00:00 +0000 https://kubeservice.cn/2024/05/16/fault-numa-topo-and-too-many-open-files/ Kubernetes Numa CPU亲和失败问题排查 背景 在配置numa拓扑管理 和 CPU管理后(Kubernetes Pod/Container NUMA亲和管理)， 业务CPU亲和不生效； spec: containers: - name: https://kubeservice.cn/2024/05/07/k8s-gpu-share/ Tue, 07 May 2024 00:00:00 +0000 https://kubeservice.cn/2024/05/07/k8s-gpu-share/ Kubernetes GPU share 能力 GPU 软隔离模式 通过 gpu-monitoring-tools 还获得 gpu device 驱动，并通过 deviceplugin 向kubelet注册GPU信息。 底层通过 NVIDIA docker-smi 可对容器进行gpu分配 **GPU虚拟化技术: https://kubeservice.cn/2024/05/06/k8s-external-traffic/ Mon, 06 May 2024 00:00:00 +0000 https://kubeservice.cn/2024/05/06/k8s-external-traffic/ Kubernetes 外部流量引入: ClusterIp、NodePort、LoadBalancer 和 Ingress 背景 今天，我被问到了一个从测试初期遇到的最常见问题之一开始 https://kubeservice.cn/2024/04/26/gpu-share-reports/ Fri, 26 Apr 2024 00:00:00 +0000 https://kubeservice.cn/2024/04/26/gpu-share-reports/ GPU 共享/虚拟化方案: 故障隔离、显存隔离、算力隔离 AI 任务一般都会用到 GPU，这类资源相对 CPU/内存 来说往往更加昂贵，目前实现混部的开源方案有 https://kubeservice.cn/2024/04/24/k8s-addon-gatekeeper-useful/ Wed, 24 Apr 2024 00:00:00 +0000 https://kubeservice.cn/2024/04/24/k8s-addon-gatekeeper-useful/ Kubernetes Addon gatekeeper使用 背景 在Kubernetes中对于集群使用规范是必然的。 但规划停留在纸面，依靠开发人员/运维人员手动确保合规性很容 https://kubeservice.cn/2024/04/23/golang-unittest-package-useful/ Tue, 23 Apr 2024 00:00:00 +0000 https://kubeservice.cn/2024/04/23/golang-unittest-package-useful/ Golang unittest package使用案例 Unittest框架: testing vs testify testify testing 基本信息 一组 golang 包，其中包含许多用于测试 Go 代码的工具。Testify 是一个 Go 测试框架 https://kubeservice.cn/2024/04/18/k8s-numa-memory-cpu/ Thu, 18 Apr 2024 00:00:00 +0000 https://kubeservice.cn/2024/04/18/k8s-numa-memory-cpu/ Kubernetes Pod/Container NUMA亲和管理 背景 先前工作中大量使用基于CPU、Memory亲和的感知调度实现， 目前对这部分统一梳理下，，NUMA 感知涉及 memory 和cpu的 https://kubeservice.cn/2024/04/15/devops-prometheus-sharding-keda-scaling/ Mon, 15 Apr 2024 00:00:00 +0000 https://kubeservice.cn/2024/04/15/devops-prometheus-sharding-keda-scaling/ 使用 Prometheus-Operator 进行 Prometheus 分片自动缩放 垂直缩放与水平缩放 Prometheus已经成为云原生时代事实上的监控工具。从监控小型花园的实例到企业中大规模的监控， https://kubeservice.cn/2024/03/18/devops-gitlab-ci-dind-kind/ Mon, 18 Mar 2024 00:00:00 +0000 https://kubeservice.cn/2024/03/18/devops-gitlab-ci-dind-kind/ Gitlab CI/CD 实现Kind部署运行（类似于github helm/kind action） 背景 需要在docker中运行docker服务, 可能是 docker in docker in docker 模式 因此，有必要的 https://kubeservice.cn/2024/02/28/golang-alias-method-algorithm/ Wed, 28 Feb 2024 00:00:00 +0000 https://kubeservice.cn/2024/02/28/golang-alias-method-algorithm/ Golang之 go实现基于离散概率分布算法负载均衡策略 背景 实现O(1) 加权随机算法, 基于离散概率分布中进行采样的有效算法，根据某个任意概率分 https://kubeservice.cn/2024/01/29/github-push-pull-error/ Mon, 29 Jan 2024 00:00:00 +0000 https://kubeservice.cn/2024/01/29/github-push-pull-error/ Github Push/Pull 失败的问题 git报错Failed to connect to github.com port 443 after 31421ms: Timed out 场景: 在git clone/push/pull时，一直报错Failed to connect to github.com port 443 after xxxms: https://kubeservice.cn/2024/01/10/my-github-2023/ Wed, 10 Jan 2024 00:00:00 +0000 https://kubeservice.cn/2024/01/10/my-github-2023/ 2023年度社区贡献集合 link my github readme https://kubeservice.cn/2023/01/03/golang-and-kubernetes-finalizer-useful/ Wed, 03 Jan 2024 00:00:00 +0000 https://kubeservice.cn/2023/01/03/golang-and-kubernetes-finalizer-useful/ Golang 和 Kubernetes finalizer使用方式 Golang 垃圾回收 finalizer Golang finalizer直白点理解，是Go语言中的析构函数. 可通过runtime.SetFinali https://kubeservice.cn/2023/23/32/kubeservice-stack-cncf-card-mode/ Sun, 31 Dec 2023 00:00:00 +0000 https://kubeservice.cn/2023/23/32/kubeservice-stack-cncf-card-mode/ Kubeservice Stack社区被纳入认证合作伙伴和提供商 KubeService 成为landscape card mode 项目 地址: KubeService landscape v2.0 https://kubeservice.cn/2023/12/24/k8s-kueue-scheduler-useful/ Sun, 24 Dec 2023 00:00:00 +0000 https://kubeservice.cn/2023/12/24/k8s-kueue-scheduler-useful/ Kubernetes kueue 原生作业队列调度器 背景 kueue是一款 Kubernetes 原生作业队列调度器. 扩展 Job/CronJob 调度层对 Job依赖、 优先级、 资源公平性等进行的多维度的扩展。实现基于底 https://kubeservice.cn/2023/12/06/k8s-descheduler-useful/ Wed, 06 Dec 2023 00:00:00 +0000 https://kubeservice.cn/2023/12/06/k8s-descheduler-useful/ Kubernetes descheduler使用方式 descheduler是对于现有的 kube-scheduler 精细化调度丰富. de-scheduler 当业务长期运行后, 出现warning到一定情况，通过预 https://kubeservice.cn/2023/11/27/k8s-soa-governance/ Mon, 27 Nov 2023 00:00:00 +0000 https://kubeservice.cn/2023/11/27/k8s-soa-governance/ 服务治理之 关于服务治理的个人看法 一、熵增现象 在软件开发、维护过程中。软件的生命力总是从最初的理想状态，逐步趋向于复杂、混乱和无序状态发展，软 https://kubeservice.cn/2023/11/24/fault-k8s-kube-proxy-xtable-lock/ Fri, 24 Nov 2023 00:00:00 +0000 https://kubeservice.cn/2023/11/24/fault-k8s-kube-proxy-xtable-lock/ Kubernetes kube-proxy xtable lock 问题排查 背景错误 Failed to execute iptables-restore: exit status 1 (iptables-restore: line xxx failed) Failed to ensure that filter chain KUBE-SERVICES exists: error creating chain "KUBE-EXTERNAL-SERVICES": exit status 4: Another app is currently holding the xtables lock. Stopped waiting after 5s. 问题原因一 iptables 相关命令（如 iptables https://kubeservice.cn/2023/11/22/k8s-application-service-decoupling/ Wed, 22 Nov 2023 00:00:00 +0000 https://kubeservice.cn/2023/11/22/k8s-application-service-decoupling/ 服务治理之 平台与应用服务解耦 原则 业务完成微服务改造（计算存储分离、控制数据分离），以Kubernetes做运行时生命周期管理， 并可以在水平扩 https://kubeservice.cn/2023/11/22/istio-ambient-mesh/ Wed, 22 Nov 2023 00:00:00 +0000 https://kubeservice.cn/2023/11/22/istio-ambient-mesh/ Ambient Mesh vs Sidecar vs Proxyless 实现service mesh 能力对比 背景 从 sidecar 到 proxyless 再到 Ambient 模式 Ambient Mesh 模式是一种 Sidecar less模式， 将服务直接sidecar代理转换到统一网络ztu https://kubeservice.cn/2023/11/09/k8s-prometheus-adpater-vs-keda/ Thu, 09 Nov 2023 00:00:00 +0000 https://kubeservice.cn/2023/11/09/k8s-prometheus-adpater-vs-keda/ Kubernetes 自定义缩放: prometheus-adpater vs keda 背景 Kubernetes 官方主要支持基于 Pod CPU/Memory 的伸缩，这是应用最为广泛的伸缩指标，需要部署 metrics-server 才可使用。 可以对pod进行指标设置： apiVersion: autoscaling/v2beta2 kind: HorizontalPodAutoscaler metadata: labels: https://kubeservice.cn/2023/10/17/k8s-pod-mount-nfs/ Tue, 17 Oct 2023 00:00:00 +0000 https://kubeservice.cn/2023/10/17/k8s-pod-mount-nfs/ Kubernetes Pod动态mount nfs方式 背景 为Pod 挂在一个nfs目录, 临时处理数据使用。 确保pod不重启。 验证方式 准备 nfs-server [root@xxxxx /var/lib/paascontainer/nfs]# exportfs -s /var/lib/paascontainer/nfs *(sync,wdelay,hide,no_subtree_check,sec=sys,rw,secure,no_root_squash,no_all_squash) [root@xxxxx /var/lib/paascontainer/nfs]# showmount -e 172.16.0.8 Export list https://kubeservice.cn/2023/10/12/golang-k8s-client-go-informers/ Thu, 12 Oct 2023 00:00:00 +0000 https://kubeservice.cn/2023/10/12/golang-k8s-client-go-informers/ Kubenetes client-go informers添加转换函数，apiserver 内存优化" 背景 client-go 函数转换机制 - transform functions 在 Client-go 中，对象放入缓存之前对其进行转换。Cl https://kubeservice.cn/2023/10/08/kernel-enable-btf/ Sun, 08 Oct 2023 00:00:00 +0000 https://kubeservice.cn/2023/10/08/kernel-enable-btf/ Kernel 开启BTF 方式 背景 BTF（BPF Type Format）是一种元数据格式，对与BPF程序/map有关的调试信息进行编码。与BPF程序/map有关的 https://kubeservice.cn/2023/19/19/fault-k8s-kubelet-apiserver-connection-fail/ Tue, 19 Sep 2023 00:00:00 +0000 https://kubeservice.cn/2023/19/19/fault-k8s-kubelet-apiserver-connection-fail/ Kubernetes kubelet 与 apiserver 断连后，依旧使用关闭连接 现象 表现是：通过kubelet 报错，一段时间后节点NotReady。 日志： E0906 02:03:08.585672 392662 reflector.go:123] object-"089f93c2"/"a697eaa005a-4b60b0": Failed to list *v1.ConfigMap: Get https://127.0.0.1:6443/api/v1/namespaces/089f93c2/configmaps?fieldSelector=metadata.name%3Da697eaa005a-4b60b0&limit=500&resourceVersion=0: read tcp 127.0.0.1:62060->127.0.0.1:6443: use of closed https://kubeservice.cn/2023/09/18/k8s-client-go-configuration/ Mon, 18 Sep 2023 00:00:00 +0000 https://kubeservice.cn/2023/09/18/k8s-client-go-configuration/ Kubernetes client-go 常用配置 第一篇: Kubernetes client-go使用方式 client-go config 配置 type Config struct { // Host must be a host string, a host:port pair, or a URL to the base of the apiserver. // If a URL is given then the (optional) Path of that URL represents a prefix that must // https://kubeservice.cn/2023/09/11/fault-k8s-apiserver-gatewaytimeout/ Mon, 11 Sep 2023 00:00:00 +0000 https://kubeservice.cn/2023/09/11/fault-k8s-apiserver-gatewaytimeout/ Kubernetes APIServer 异常 504 GatewayTimeout 问题一： Kubernetes APIServer 503 logging error output: service unavailable metrics.k8s.io/v1beta1 api-resource 不存在问题 I0908 17:58:06.013828 1 httplog.go:89] "HTTP" verb="GET" URI="/apis/metrics.k8s.io/v1beta1?timeout=32s" latency="511.066µs" userAgent="kubectl/v1.21.5 (linux/amd64) kubernetes/83c85a6" srcIP="10.253.101.202:56436" resp=503 statusStack=" goroutine 178079822 [running]: .... " https://kubeservice.cn/2023/08/31/golang-interleaved-wrr/ Thu, 31 Aug 2023 00:00:00 +0000 https://kubeservice.cn/2023/08/31/golang-interleaved-wrr/ golang 实现交替加权轮询-interleaved weighted round robin 背景 背景实现： O(1) 时间复杂度 和 O(n) 空间复杂度 的 加权负载平衡实现 交错式加权轮询负载均衡算法 interleaved weighted round robin https://kubeservice.cn/2023/08/28/nydus-vs-estargz-image-format/ Mon, 28 Aug 2023 00:00:00 +0000 https://kubeservice.cn/2023/08/28/nydus-vs-estargz-image-format/ nydus vs estargz image format对比 背景 OCIv2 vs OCIv1 OCIv1是开源容器 规定的镜像格式标准(image format spec). OCIv2是解决OCIv1部分问题后，解决的镜像标准 https://kubeservice.cn/2023/08/22/dubbo-sidecar-dubbo3-proxyless/ Tue, 22 Aug 2023 00:00:00 +0000 https://kubeservice.cn/2023/08/22/dubbo-sidecar-dubbo3-proxyless/ Dubbo2 sidecar 与 Dubbo3 proxyless通信 Dubbo 2 绝大部分使用dubbo 协议 + 自定义序列化. 默认 hessian2； 2.7版本以后开始支持grpc协议 Dubbo 3 支持 https://kubeservice.cn/2023/08/18/ai-code-translator/ Fri, 18 Aug 2023 00:00:00 +0000 https://kubeservice.cn/2023/08/18/ai-code-translator/ 基于GPT3.5 openapi接口，实现AI代码转换 通过镜外服务器，构建的服务代码转换平台：https://ai.kubeservice.c https://kubeservice.cn/2023/08/03/k8s-cosign-webhook/ Thu, 03 Aug 2023 00:00:00 +0000 https://kubeservice.cn/2023/08/03/k8s-cosign-webhook/ 基于Cosign容器镜像签名/验证工具，实现K8s部署pod可信验证 腾讯云TKE集群，在23年5月，上线了一特性: Cerberus 组件支持对签名镜像进行可 https://kubeservice.cn/2023/07/31/fault-k8s-pleg/ Mon, 31 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/31/fault-k8s-pleg/ 现象 表现是：通过docker exec进入容器卡住，并且在10后 rpc timeout 报错 背景信息 docker info 信息 [deployer@xxxx ~]$ sudo docker info Containers: 47 Running: 30 Paused: 0 Stopped: 17 Images: 30 Server Version: 18.09.5 Storage Driver: overlay2 Backing Filesystem: xfs Supports d_type: true https://kubeservice.cn/2023/07/27/gitee-github-diff-point/ Thu, 27 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/27/gitee-github-diff-point/ 习惯使用github的同学，一定会发现github非常实用的两个功能： Sync fork Squash and merge/Rebase and merge Sync fork 当 fork 开源代码到个人分支后，由于主分支有其他人员提交， https://kubeservice.cn/2023/07/17/fault-k8s-controller-manager-throttling/ Mon, 17 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/17/fault-k8s-controller-manager-throttling/ 1. 现象 线上k8s集群报警，部署带有PV/PVC的pod，pod启动完成时间长达4min+. 包括 创建PVC、创建PV，PVC变更bound状态 https://kubeservice.cn/2023/07/14/License-terms-of-use/ Fri, 14 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/14/License-terms-of-use/ License 权益和使用规范 对于之前使用 License 不规范的点，总结blog, 进行统一学习和梳理。 licenses许可证 由 自由软件基金会与与和合规实验室进行统一维 https://kubeservice.cn/2023/07/13/zadig-use-and-experience/ Thu, 13 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/13/zadig-use-and-experience/ Zadig使用与体验 最近了解到Zadig CI/CD 新起之秀，并对zadig进行一番体验. 功能介绍 Zadig核心是替换Jenkins的CICD套件，可 https://kubeservice.cn/2023/07/12/kubeservice-stack-official-announcement/ Wed, 12 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/12/kubeservice-stack-official-announcement/ 声明公告 看到 DCOS公众号 对 Kubeservice Stack社区 的用心与关注，我们表示认可与感谢，希望能有越来越多的人提出问题，我们共同解决问题，从而把社区越办 https://kubeservice.cn/2023/07/07/github-action-custom-readme/ Fri, 07 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/07/github-action-custom-readme/ Github Action 自动统计组织/个人 活跃信息 最近用 Github Actions 玩出了花样。这里记录一下通过 Github Api 和 Github Actions 统计组织内活跃信息统计。 希望做到统计： 统计 org 下所有仓库的数据， https://kubeservice.cn/2023/07/03/containerd-start-timeout/ Mon, 03 Jul 2023 00:00:00 +0000 https://kubeservice.cn/2023/07/03/containerd-start-timeout/ 一次Containerd 启动缓慢问题追查 div.notices { margin: 2rem 0; position: relative; } div.notices p { padding: 15px; white-space: pre-wrap; display: block; margin-top: 0rem; margin-bottom: 0rem; color: #666; } div.notices p:first-child:before { position: absolute; top: 2px; color: #fff; font-family: "Font Awesome 5 Free"; font-weight: 900; content: "\f06a"; left: 10px; } div.notices p:first-child:after { position: absolute; https://kubeservice.cn/2023/06/25/tools-github-action-repo-sync/ Sun, 25 Jun 2023 00:00:00 +0000 https://kubeservice.cn/2023/06/25/tools-github-action-repo-sync/ repos-mirror-action github action实现不同仓库代码同步 一个用于在hub间（例如Github，Gitee）代码仓库同步的action 背景 在开源贡献的代码托管的过 https://kubeservice.cn/2023/06/10/kspack-to-openeuler/ Sat, 10 Jun 2023 00:00:00 +0000 https://kubeservice.cn/2023/06/10/kspack-to-openeuler/ 日前，欧拉开发者大会（openEuler Developer Day 2023）在京成功举办。中国移动云能力中心在大会上发布并介绍了：移动云向欧拉社区贡献KSPack https://kubeservice.cn/2023/06/07/devops-k8s-finops-agent/ Wed, 07 Jun 2023 00:00:00 +0000 https://kubeservice.cn/2023/06/07/devops-k8s-finops-agent/ 节点内存态统计和计算 Node-metrics 背景 请查看第一篇：https://kubeservice.cn/2022/11/24/k8s-crane-schedu https://kubeservice.cn/2023/05/31/golang-common-goroutine-scheduler/ Wed, 31 May 2023 00:00:00 +0000 https://kubeservice.cn/2023/05/31/golang-common-goroutine-scheduler/ 定时调度引擎 goroutine scheduler 背景 类似于 python schedule的伟大设计，实现golang版本的 golang scheduer模块 使用方式 package main import ( "flag" "fmt" "time" "github.com/kubeservice-stack/common/pkg/schedule" ) func ExampleTask(name string) { fmt.Println("Example Task " https://kubeservice.cn/2023/05/23/k8s-crane-scheduler-plus-2/ Tue, 23 May 2023 00:00:00 +0000 https://kubeservice.cn/2023/05/23/k8s-crane-scheduler-plus-2/ crane-scheduler-plus 独立于 Prometheus 实现版本 1. 背景 请查看第一篇：https://kubeservice.cn/2022/11/24/k8s-crane-schedul https://kubeservice.cn/2023/05/22/golang-common-storage-support/ Mon, 22 May 2023 00:00:00 +0000 https://kubeservice.cn/2023/05/22/golang-common-storage-support/ 内存时序数据库引擎storage 背景 近期研究内存统计stats，并可以快速通过statistics数学方法进行统计活动相关数据。 比如统计历史 https://kubeservice.cn/2023/05/09/fault-k8s-dockerd-high-memory/ Tue, 09 May 2023 00:00:00 +0000 https://kubeservice.cn/2023/05/09/fault-k8s-dockerd-high-memory/ 1. 现象 线上k8s集群报警，登陆查看dockerd内存使用10G+（Node集群大小是15G），Dockerd占用内存70% 2. 排查思路 2.1 docker 版本 https://kubeservice.cn/2023/05/08/golang-dependency-hell/ Mon, 08 May 2023 00:00:00 +0000 https://kubeservice.cn/2023/05/08/golang-dependency-hell/ 1. 基础规则：import兼容性规则 Go语言的import兼容性规则是指： 如果一个旧包与新包共用相同的 import 路径，那么新包必须向后兼容旧包。 Go的 https://kubeservice.cn/2023/04/25/devops-k8s-observability-stack/ Tue, 25 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2023/04/25/devops-k8s-observability-stack/ 1. WebAssembly：没有容器的 Docker 2022-12, Docker 宣布与WasmEdge合作支持WebAssembly。 Docker 成为加入字节码联盟中的一员! 2. 什么是Web https://kubeservice.cn/2023/04/24/k8s-ebpf-exporter/ Mon, 24 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2023/04/24/k8s-ebpf-exporter/ 1. Linux系统性能采集 目前对Linux系统进行性能采集：主要有两个exporter node_exporter cAdvisor node_exporter 提供有关基础知识的信息，例如按类型细分的 CPU使用 https://kubeservice.cn/2023/04/22/qi-share-remander-2023/ Sat, 22 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2023/04/22/qi-share-remander-2023/ 陆琦QI博士部分观点梳理 陆奇QI博士的部分观点: 搜索引擎是一个大模型产品，模型很大，很神奇。 用户需求必须三位一体：信息、模型、行动。 未来的产 https://kubeservice.cn/2023/04/20/devops-loong64-support/ Thu, 20 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2023/04/20/devops-loong64-support/ 龙芯loong64架构国产指令集合 龙芯loong64架构国产指令集合， 在国内目前最有可能成为国产化标准。 以软件思维建立生态 建立指令集生态： 试 https://kubeservice.cn/2022/04/13/k8s-lxcfs-remount/ Thu, 13 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2022/04/13/k8s-lxcfs-remount/ 问题 lxcfs 需要部署在 Kubernetes 集群的各个 Node 节点上，当LXCFS服务重启或者crash时，之前已经挂载在容器/proc的挂载点会失效，导致在容器中执行fr https://kubeservice.cn/2023/04/12/tools-kind/ Wed, 12 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2023/04/12/tools-kind/ kind 是 Kubernetes in Docker 的简写，是一个使用 Docker 容器作为 Nodes，在本地创建和运行 Kubernetes 群集的工具。适用于在本机创建 Kubernetes 群集环境进行开发和测试。 容器作为Node 首 https://kubeservice.cn/2023/04/07/ecology-k8s-1-27/ Fri, 07 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2023/04/07/ecology-k8s-1-27/ Kubernetes 1.27 版本 release Kubernetes v1.26 是 2022 年只有 37 项特性。Kubernetes v1.27 2023年第一个大版本更新，包含了近 60 项主要的更新。这个版本可以说是一个变化非常显著 https://kubeservice.cn/2023/04/03/helm-charts-repository/ Mon, 03 Apr 2023 00:00:00 +0000 https://kubeservice.cn/2023/04/03/helm-charts-repository/ GitHub Pages 创建 Helm charts repository发布 GitHub Pages github Pages 开始静态网页地址： 非常方便用于 helm charts repository中压缩包 和 静态index.yaml部署和使 https://kubeservice.cn/2023/03/30/tools-git-to-gerrit/ Thu, 30 Mar 2023 00:00:00 +0000 https://kubeservice.cn/2023/03/30/tools-git-to-gerrit/ 将gitlab/github同步工程到gerrit方法 1. 需要同步的代码仓库 $ git clone git@github.com:kubeservice-stack/muti-arch.git $ cd muti-arch $ git branch -a * master remotes/origin/HEAD -> origin/master remotes/origin/master 2. 指定远端仓库的名称为gerri https://kubeservice.cn/2023/03/27/abservability-summit-2023/ Mon, 27 Mar 2023 00:00:00 +0000 https://kubeservice.cn/2023/03/27/abservability-summit-2023/ 报名渠道活动行：https://www.huodongxing.com/event/6695157778700 https://kubeservice.cn/2023/03/23/docker-image-copy-multi-arch/ Thu, 23 Mar 2023 00:00:00 +0000 https://kubeservice.cn/2023/03/23/docker-image-copy-multi-arch/ 1.多架构镜像 制作 这部分请参考：Docker Buildx 构建多系统镜像 2.多架构镜像 copy、sync和管理 2.1多架构场景下有多出了 manifests 和 manifests list manifests 是镜像 https://kubeservice.cn/2023/03/06/devops-logging-agent/ Mon, 06 Mar 2023 00:00:00 +0000 https://kubeservice.cn/2023/03/06/devops-logging-agent/ 开源项目对比 Promtail Loggie Filebeat Fluentd Logstash Flume 开发语言 Golang Golang Golang Ruby JRuby Java 多Pipeline 不支持 支持 单队列 单队列 支持 支持 多输出源 不支持，仅一个Output 支持 不支持，仅 https://kubeservice.cn/2023/02/27/golang-docker-buildx-muti-arch/ Fri, 17 Feb 2023 00:00:00 +0000 https://kubeservice.cn/2023/02/27/golang-docker-buildx-muti-arch/ Docker Buildx 构建多系统镜像 由于开发调试编译需要，需要编译amd64、aarch64、arm64等不同平台指令二进制；为了方便使用者，编译多系统平台架 https://kubeservice.cn/2023/02/10/golang-serialization-library/ Fri, 10 Feb 2023 00:00:00 +0000 https://kubeservice.cn/2023/02/10/golang-serialization-library/ 高性能的序列化和反序列化算法库xxxPack（未想好名称） 对比目前业界高性能库： encoding/gob encoding/json github.com/vmihailenco/msgpack/v5 labix.org/v2/mgo/bson github.com/valyala/fastjson github.com/json-iterator/go 自研序列化算法 验证数据集合： type Data struct { Name string BirthDay time.Time Phone string https://kubeservice.cn/2023/02/09/devops-grafana-pingmesh-heatmap-panel/ Thu, 09 Feb 2023 00:00:00 +0000 https://kubeservice.cn/2023/02/09/devops-grafana-pingmesh-heatmap-panel/ 用于Pingmesh直观展现 Pingmesh Heatmap Panel 基于baidu Echarts库实现变种 heatmap 图形, 对于 pingmesh 进行二维图形化直观展现 为了Grafana实现此类展现, https://kubeservice.cn/2023/01/28/k8s-cpusets-controller/ Sat, 28 Jan 2023 00:00:00 +0000 https://kubeservice.cn/2023/01/28/k8s-cpusets-controller/ 基于节点cpu精细化调度：cpusets-controller div.notices { margin: 2rem 0; position: relative; } div.notices p { padding: 15px; white-space: pre-wrap; display: block; margin-top: 0rem; margin-bottom: 0rem; color: #666; } div.notices p:first-child:before { position: absolute; top: 2px; color: #fff; font-family: "Font Awesome 5 Free"; font-weight: https://kubeservice.cn/2023/01/24/ecology-k8s-1-26/ Tue, 24 Jan 2023 00:00:00 +0000 https://kubeservice.cn/2023/01/24/ecology-k8s-1-26/ Kubernetes 1.26 版本 release div.notices { margin: 2rem 0; position: relative; } div.notices p { padding: 15px; white-space: pre-wrap; display: block; margin-top: 0rem; margin-bottom: 0rem; color: #666; } div.notices p:first-child:before { position: absolute; top: 2px; color: #fff; font-family: "Font Awesome 5 Free"; font-weight: 900; content: "\f06a"; left: 10px; } div.notices p:first-child:after { position: absolute; top: 2px; color: #fff; left: 3rem; } div.notices.info p { border-top: 30px solid #F0B37E; background: https://kubeservice.cn/2023/01/16/fault-k8s-apiserver-memory-crash/ Mon, 16 Jan 2023 00:00:00 +0000 https://kubeservice.cn/2023/01/16/fault-k8s-apiserver-memory-crash/ Kubernetes APIServer 内存爆满 现象 线上Kubernetes集群, 一共5台机器，其中4台机器内存80%+，1台机器内存3.59%， 其中一台master apiserver Node 内存飙 https://kubeservice.cn/2023/01/11/k8s-kata-runtime-update/ Wed, 11 Jan 2023 00:00:00 +0000 https://kubeservice.cn/2023/01/11/k8s-kata-runtime-update/ Kubernetes kata-runtime 集群部署 Kata Containers 旨在构建一个安全且与 OCI 兼容的容器运行时，通过使用硬件虚拟化将每个容器工作负载放入轻量级虚拟机中，从而增强容器工作负载的安全性 https://kubeservice.cn/2023/01/10/k8s-client-go-useful/ Tue, 10 Jan 2023 00:00:00 +0000 https://kubeservice.cn/2023/01/10/k8s-client-go-useful/ Kubernetes client-go使用方式 在Kubernetes上，通常需要Client来访问Kubernetes中的对象，目前最常用的是RESTClie https://kubeservice.cn/2023/01/05/k8s-kata-csi-driver/ Thu, 05 Jan 2023 00:00:00 +0000 https://kubeservice.cn/2023/01/05/k8s-kata-csi-driver/ 技术方案之 基于kata direct volume特性, 实现安全容器KataContainer的 CSI block volume直通方案 在 Kubernetes 中集成 Kata Containers 可以为容器运行时提供 https://kubeservice.cn/2023/01/04/k8s-reliability-list-data/ Wed, 04 Jan 2023 00:00:00 +0000 https://kubeservice.cn/2023/01/04/k8s-reliability-list-data/ Kubernetes apiserver/etcd 的 LIST 性能调优 Kubernetes LIST 操作通常都是非常重量级的，不仅占用大量的 磁盘 IO、网络带宽和 CPU，而且会影响同时间段的其他请求（尤其是响应延迟要求极高 https://kubeservice.cn/2022/12/23/fault-k8s-pod-dns-5s-timeout/ Fri, 23 Dec 2022 00:00:00 +0000 https://kubeservice.cn/2022/12/23/fault-k8s-pod-dns-5s-timeout/ 在Kubernetes环境里的容器中curl另一个服务时会出现断断续续的超时, 问题现象很简单, 但问题根源很复杂 问题现象 root@nginx-test:/# time curl -I nginx-ingress.default.svc.cluster.local HTTP/1.1 200 OK Server: nginx/1.14.2 Date: https://kubeservice.cn/2022/12/20/k8s-nodeport-iptables-drop/ Tue, 20 Dec 2022 00:00:00 +0000 https://kubeservice.cn/2022/12/20/k8s-nodeport-iptables-drop/ Kubernetes NodePort 端口封禁 - iptables Drop Kubernetes NodePort是比较危险的操作，整个集群中每个Node都会创建一个端口，增加了整个集群的被攻击面 部署背景 NodePor https://kubeservice.cn/2022/11/29/platform-k8s-basa/ Tue, 29 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/29/platform-k8s-basa/ 基于wayne构建的Kubenetes 多集群管理平面 Basa Basa (体验版) 是一个支持 Multi-cluster Kubernetes集群的 可视化管理平台, 通过直观的页面操作便 https://kubeservice.cn/2022/11/24/k8s-crane-scheduler-plus/ Thu, 24 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/24/k8s-crane-scheduler-plus/ 技术方案之 基于节点真实负载情况调度：crane-scheduler-plus crane-scheduler 解决了Kubernetes仅仅基于资源的 resource request 进行调度，然而 Pod 的 https://kubeservice.cn/2022/11/22/golang-common-library-support/ Tue, 22 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/22/golang-common-library-support/ Golang Common Library 基础库发布 Common Library 是 一个编程工具包,用于在 Golang 中构建微服务（或单体）。解决分布式系统和应用程序架构中的常见问题，可以让业务更加专注于交付业务 https://kubeservice.cn/2022/11/21/kubeservice-stack-community/ Mon, 21 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/21/kubeservice-stack-community/ KubeServiceStack Community 发布成立！ KubeServiceStack = Kubernetes/KubeEdge + Custom Service ! 构建 Kubernetes/KubeEdge 企业级周边生态体系! 字越少，事越大！ 直接上链接： https://stack.kubeservice.cn/ https://kubeservice.cn/2022/11/17/k8s-cgroup-driver/ Thu, 17 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/17/k8s-cgroup-driver/ Kubernetes cgroup driver 变更方式 现象 failed to create kubelet: misconfiguration: kubelet cgroup driver: "cgroupfs" is different from docker cgroup driver: "systemd" 文件驱动默认由systemd改成cgroupfs, 而我们安装的docker使用的文件驱动是 https://kubeservice.cn/2022/11/16/k8s-systemd-vs-cgroupfs-driver/ Wed, 16 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/16/k8s-systemd-vs-cgroupfs-driver/ Systemd vs Cgroupfs driver 对比 简单来说： Systemd 目前是 Linux init 默认启动方式，是对cgroup的 一次包装（随操作系统发布，天生屏蔽 cgroup v1 和 cgroup v2 的差异） Cgroupfs 是 cgroup 子系统 的另一种实 https://kubeservice.cn/2022/11/15/fault-k8s-etcd-fail/ Tue, 15 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/15/fault-k8s-etcd-fail/ TIPS之 Kubernetes HPA 失效问题排查 现象 $ kubectl get hpa -A NAME REFERENCE TARGETS MINPODS MAXPODS REPLICAS AGE xxxxxx-apiserver Deployment/xxxxxx-apiserver <UNKOWN>/10% 1 6 6 6h36m $ kubectl top node Error from server (ServiceUnavailable): the server is currently unable to handle the request (get nodes.metrics.k8s.io) $ kubectl top pod Error from server (ServiceUnavailable): the server is currently unable to handle the request https://kubeservice.cn/2022/11/07/devops-k8s-observability-stack/ Mon, 07 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/07/devops-k8s-observability-stack/ 基于云原生体系构建的可观测系统：Observability-stack Observability Stack 是基于云原生组件构建的OpsCenter系统。 包括 基于Promet https://kubeservice.cn/2022/11/07/governance-base-image/ Mon, 07 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/07/governance-base-image/ 容器 基础镜像 Base Image 规范 将应用Application打包到镜像Image中形成业务镜像Application Image，往往需要一个基础镜像Ba https://kubeservice.cn/2022/11/06/fault-node-traceroute/ Sun, 06 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/06/fault-node-traceroute/ 现象 表现是：通过kubectl 请求远端接口时，出现部分报错 $ kubectl get deploy -n xxx E1104 18:00:08.121482 32134 request.go:1058] Unexpected error when reading response body: http2: client connection lost unexpected error when reading response body. Please retry. Original error: http2: client connection lost 分析过程 观测a https://kubeservice.cn/2022/11/02/devops-k8s-logging/ Wed, 02 Nov 2022 00:00:00 +0000 https://kubeservice.cn/2022/11/02/devops-k8s-logging/ 基于旁路 logging 日志搜集中心 和 日志搜索引擎 背景 论到要部署一套日志系统， 信用户首先会想到的就是经典的ELK架构，或者现在被称为Elastic Stac https://kubeservice.cn/2022/10/25/k8s-kubelet-node-shell-tools/ Tue, 25 Oct 2022 00:00:00 +0000 https://kubeservice.cn/2022/10/25/k8s-kubelet-node-shell-tools/ Kubernetes Kubelet 获得Node节点的 Shell 权限方法 在 Kubernetes 集群的整个生命周期中，可能需要访问集群工作节点。此访问可能用于维护、配置检查、日志收集或其他故障排除操作 https://kubeservice.cn/2022/10/21/devops-k8s-pingmesh/ Fri, 21 Oct 2022 00:00:00 +0000 https://kubeservice.cn/2022/10/21/devops-k8s-pingmesh/ 基于blackbox构建的Pingmesh体系 背景 数据中心自身是极为复杂的，其中网络涉及到的设备很多就显得更为复杂，一个大型数据中心都有成百 https://kubeservice.cn/2022/10/20/devops-k8s-prometheus/ Thu, 20 Oct 2022 00:00:00 +0000 https://kubeservice.cn/2022/10/20/devops-k8s-prometheus/ 基于旁路的Prometheus监控体系构建 基于 kubernetes 集群之外的 OPSCenter 建设. 在此先提两个经常被问到问题： Kubenetes中已有很晚上的监控体系（cA https://kubeservice.cn/2022/10/12/2022-1024-developer-day/ Wed, 12 Oct 2022 00:00:00 +0000 https://kubeservice.cn/2022/10/12/2022-1024-developer-day/ 背景： 很高兴，受TGO鲲鹏会邀进行，分享下做云原生技术和技术管理的心路历程. 正巧，公司也准备一个 1024程序员节 主题分享活动。 因此，在此机会 https://kubeservice.cn/2022/10/09/k8s-pod-local-pvc-limit/ Sun, 09 Oct 2022 00:00:00 +0000 https://kubeservice.cn/2022/10/09/k8s-pod-local-pvc-limit/ 对 Kubernetes Pod进本地磁盘(local,disk,LVM) 进行流量控制 一. 继承上一章节 Kubernetes Pod进程网络带宽 流量控制 混合云场景业务Pod直接相互干扰 https://kubeservice.cn/2022/09/28/fault-node-pod-conditions-ready-status/ Wed, 28 Sep 2022 00:00:00 +0000 https://kubeservice.cn/2022/09/28/fault-node-pod-conditions-ready-status/ Kubernetes Node 网络故障后 Pod Ready状态 flase 问题排查 现象 网络故障，Kubernetes Node 恢复，但是 Node 节点上的 Pod的状态是 running, 但是 Conditions:Ready 状态是 False status: conditions: - lastProbeTime: null lastTransitionTime: "2021-11-18T12:11:20Z" https://kubeservice.cn/2022/09/22/k8s-apiserver-rate-limit/ Thu, 22 Sep 2022 00:00:00 +0000 https://kubeservice.cn/2022/09/22/k8s-apiserver-rate-limit/ kubernetes apiserver限流方案 背景 为了防止突发流量影响apiserver可用性，k8s支持多种限流配置，包括： MaxInFlightLimit https://kubeservice.cn/2022/09/13/k8s-kubelet-rollingupdate/ Tue, 13 Sep 2022 00:00:00 +0000 https://kubeservice.cn/2022/09/13/k8s-kubelet-rollingupdate/ Kubernetes Kubelet certs 滚动更新 kubelet证书到期，kubelet将无法使用过期的证书连接apiserver，从而导致kubelet无法正常工作，日志会给 https://kubeservice.cn/2022/09/01/k8s-pod-deployment-tuning/ Thu, 01 Sep 2022 00:00:00 +0000 https://kubeservice.cn/2022/09/01/k8s-pod-deployment-tuning/ Kubenetes Pod 部署&滚动升级 调优 Pod 在滚动升级部署中部署pod个数到可用指标更新速率 是衡量 Kubenetes 调度能力最核心指标 举个例子: rollingUpdate: maxSurge: 25% #每个滚动更新的实 https://kubeservice.cn/2022/09/01/large-k8s-setting-tuning/ Thu, 01 Sep 2022 00:00:00 +0000 https://kubeservice.cn/2022/09/01/large-k8s-setting-tuning/ 大规模 Kubernetes 集群调优设置 0. 前置条件 0.1 网段划分 首先集群网段划分，支持5000+ Node， 10000+ Service 和 100000+ Pod, 因此需要： 1个B段IP 用于Node划分 3个B段I https://kubeservice.cn/2022/08/30/k8s-pod-taskset/ Tue, 30 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/30/k8s-pod-taskset/ 主机系统进程驱逐 和 容器绑核 操作步骤 避免os进程影响，使系统进程调度在 0,1 CPU 验证CPU独占性能，将工具亲和到空闲的 CPU上 具体步骤 1. 使用isol https://kubeservice.cn/2022/08/26/ecology-k8s-1-21/ Fri, 26 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/26/ecology-k8s-1-21/ Kubernetes 1.21 版本 release ReleaseNote: https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG/CHANGELOG-1.21.md Kube-proxy IPVS变更 需要 net.ipv4.conf.all.route_localnet 设置为 1. 默认情况下已经不在设置此项 kubelet 添加内存管理 kubelet 组件生态中新增了一个 内存管理器 ，在 Linux 系统中，为需要保证 QoS https://kubeservice.cn/2022/08/24/ecology-k8s-1-25/ Wed, 24 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/24/ecology-k8s-1-25/ Kubernetes 1.25 版本 release div.notices { margin: 2rem 0; position: relative; } div.notices p { padding: 15px; white-space: pre-wrap; display: block; margin-top: 0rem; margin-bottom: 0rem; color: #666; } div.notices p:first-child:before { position: absolute; top: 2px; color: #fff; font-family: "Font Awesome 5 Free"; font-weight: 900; content: "\f06a"; left: 10px; } div.notices p:first-child:after { position: absolute; top: 2px; color: #fff; left: 3rem; } div.notices.info p { border-top: 30px solid #F0B37E; background: https://kubeservice.cn/2022/08/22/k8s-namespace-node-affinity/ Mon, 22 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/22/k8s-namespace-node-affinity/ 技术方案之 Kubernetes Namespace 和 Node 做亲和部署 背景 在共享集群（多租户共享底层硬件资源）中， 遇到特殊租户需要独享特定资源(比如：独占GPU资源、独占Node节点 https://kubeservice.cn/2022/08/19/fault-k8s-etcd-fail/ Fri, 19 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/19/fault-k8s-etcd-fail/ Kubernetes Etcd 启动失败问题排查 etcd etcd 一直重启。查看本地 db size etcd 默认调整的 DB Size 2G, 并且收到boltdb压缩周期和模式影响 处理步骤 碎片整理 $ etcdctl --cacert xxx --key xxx --endpoints=https://127.0.0.1:2379 defrag Finished defragmenting etcd https://kubeservice.cn/2022/08/18/fault-node-containerd-fail/ Thu, 18 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/18/fault-node-containerd-fail/ Kubernetes Node Containerd Runtime 问题排查 Containerd containerd 硬重启后，出现failed to recover state: failed to reserve sandbox name node1 containerd[80463]: time="2022-08-02T17:13:13.092422629Z" level=fatal msg="Failed to run CRI service" error="failed to recover state: failed to reserve sandbox name "kube-scheduler-node1_kube-system_705e7ce1217a37349a5567101e60165d_2": name "kube-scheduler-node1_kube-system_705e7ce1217a37349a5567101e60165d_2" is reserved for "139bb0ac7e050e9e28b994e78f651a8609f426f1b5bbfc887a0d4a3350b4eee2"" 日志很明显提升，容日中有一层 https://kubeservice.cn/2022/08/10/k8s-pod-bandwidth-limit/ Wed, 10 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/10/k8s-pod-bandwidth-limit/ 技术方案之 Kubernetes Pod进程网络带宽 流量控制 背景 混合云场景业务Pod直接相互干扰 、 在离线混部(在离线服务同时在一台机器上服务用户) 等场景下，除了对 https://kubeservice.cn/2022/08/07/golang-docker-building/ Sun, 07 Aug 2022 00:00:00 +0000 https://kubeservice.cn/2022/08/07/golang-docker-building/ 由于开发调试编译需要，需要编译amd64、aarch64、arm64等不同平台指令二进制；或者，不希望编译机器安装太多依赖多版本，依赖版本不 https://kubeservice.cn/2022/07/31/k8s-master-node-scale-up-and-down/ Sun, 31 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/31/k8s-master-node-scale-up-and-down/ Kubernetes Master Node 优雅滚动替换方案 Kubernetes Master Node部署的都是 控制平面 Control 组件，并不需要处理数据平面 Data的 南北项、东西项流量，因此，核心就是在Kuberne https://kubeservice.cn/2022/07/30/fault-systemtap-tools/ Sat, 30 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/30/fault-systemtap-tools/ Systemtap 揪出杀死 Pod 的真凶 安装 CentOS安装 systemtap: yum install -y systemtap 默认没装 debuginfo，我们需要装一下，添加软件源 /etc/yum.repos.d/CentOS-Debug.repo: [debuginfo] name=CentOS-$releasever - DebugInfo baseurl=http://debuginfo.centos.org/$releasever/$basearch/ gpgcheck=0 enabled=1 protect=1 priority=1 执行 stap-prep (会安装 kernel-debuginfo) 最 https://kubeservice.cn/2022/07/26/k8s-setting-namespace-limitrange/ Tue, 26 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/26/k8s-setting-namespace-limitrange/ Kubernetes Namespace ResourceQuota LimitRange 使用设置经验 namespace 配置经验 namespace设置多租户label添加 div.notices { margin: 2rem 0; position: relative; } div.notices p { padding: 15px; white-space: pre-wrap; display: block; margin-top: 0rem; margin-bottom: 0rem; color: #666; } div.notices p:first-child:before { position: absolute; top: 2px; color: #fff; font-family: https://kubeservice.cn/2022/07/26/k8s-node-linux-os-changed/ Tue, 26 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/26/k8s-node-linux-os-changed/ Kubernetes Node Linux OS 优雅滚动替换方案 Kubernetes集群上，更换 node os操作系统，无疑是开着飞机换引擎 保证业务平稳过度的前提下，Linux OS操作系统 https://kubeservice.cn/2022/07/25/k8s-setting-health-check/ Mon, 25 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/25/k8s-setting-health-check/ Kubernetes health check K8S 支持三种健康检查： 就绪检查(readinessProbe): Pod启动后，如果配了就绪检查，要等就绪检查探测成功，Pod Ready 状态变为 T https://kubeservice.cn/2022/07/25/k8s-pod-persistent-connect-no-rebalance/ Mon, 25 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/25/k8s-pod-persistent-connect-no-rebalance/ 处理 Kubernetes Pod 业务流量长连接负载不均衡问题 解决Kubernetes APIServer流量不均衡问题 问题扩展，业务 Pod 长连接处理不均衡问题解决 负载不均 https://kubeservice.cn/2022/07/24/k8s-application-sigtrem/ Sun, 24 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/24/k8s-application-sigtrem/ Kubernetes Pod 接受 SIGTREM 信号并处理 在 Kubernetes 环境中，业务发版时经常会对 workload 进行滚动更新，当旧版本 Pod 被删除时，K8S 会对 Pod 中各个容器中的主进程发送 SIGTERM 信号，当达到超时 https://kubeservice.cn/2022/07/21/k8s-coredns-rootdns/ Thu, 21 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/21/k8s-coredns-rootdns/ DNS服务重要性 DNS（Domain Name System）是一个全球化的分布式数据库，用于存储域名与互联网 IP 地址的映射关系。 目前 web2.0 时代下，全部互联 https://kubeservice.cn/2022/07/19/book-cloudnative-whitepaper/ Tue, 19 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/19/book-cloudnative-whitepaper/ 第一部分 云原生极大的释放了云的红利 云原生的理念经过近10年发展，不断丰富、落地、实践，从早期的概念普及阶段，进入了快速发展期并商业应用阶段。 https://kubeservice.cn/2022/07/17/k8s-coredn-nodelocaldnscache/ Sun, 17 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/17/k8s-coredn-nodelocaldnscache/ 使用 NodeLocal DNSCache提高clusterDNS性能和可靠性 由于一次权威DNS故障，导致的DNS链式故障, 从中发现的各类使用问题 以及 后续可能的 https://kubeservice.cn/2022/07/12/jobs-cmss/ Tue, 12 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/12/jobs-cmss/ IaaS产品部简介 中国移动云能力中心IaaS产品部，构建移动云 ecloud 招聘对象 本次社会招聘的要求为有云原生、云计算经验的同学。 高级云原生架构师 若干 https://kubeservice.cn/2022/07/11/book-cloudnative-container/ Mon, 11 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/11/book-cloudnative-container/ 容器(Container) 什么是容器(Container)？ 容器，第一眼看它或许脑子里想到的东西：瓶瓶罐罐、装东西的工具。 生活中：水缸、矿泉 https://kubeservice.cn/2022/07/11/k8s-apiserver-no-rebalance/ Mon, 11 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/11/k8s-apiserver-no-rebalance/ 解决Kubernetes APIServer流量不均衡问题 版本： 1.8版本 <= kubernetes verison < 1.18版本 都存在 在 kubernetes 1.8以上，对kubelet 和 client-go SDK https://kubeservice.cn/2022/07/06/apiserver-replicasets-response-time/ Wed, 06 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/06/apiserver-replicasets-response-time/ 问题分析 之 Kubernetes的APIServer个数，对endpoints、Node、Service等 get all接口性能影响 Kubernet https://kubeservice.cn/2022/07/05/pod-loopcrash-of-k8s-subpath/ Tue, 05 Jul 2022 00:00:00 +0000 https://kubeservice.cn/2022/07/05/pod-loopcrash-of-k8s-subpath/ 问题分析 之 Kubernetes挂载subpath容器，在configmap/secret变更后，重启容器时挂载失败 版本： kubernetes 1.18 以及 1.18 以下版本都 https://kubeservice.cn/2021/05/10/info-share-2021/ Mon, 10 May 2021 00:00:00 +0000 https://kubeservice.cn/2021/05/10/info-share-2021/ #the-canvas { border: 1px solid black; direction: ltr; width: 100%; height: auto; display: none; } #paginator { display: none; text-align: center; margin-bottom: 10px; } #loadingWrapper { display: none; justify-content: center; align-items: center; width: 100%; height: 350px; } #loading { display: inline-block; width: 50px; height: 50px; border: 3px solid #d2d0d0;; border-radius: 50%; border-top-color: #383838; animation: spin 1s ease-in-out infinite; -webkit-animation: spin 1s ease-in-out infinite; } @keyframes spin { to { -webkit-transform: https://kubeservice.cn/2021/04/27/k8s-lxcfs-overview/ Tue, 27 Apr 2021 00:00:00 +0000 https://kubeservice.cn/2021/04/27/k8s-lxcfs-overview/ Pod 容器内资源可见性：让Pod的资源视角真实、准确 ❓是否有个发现：Pod中限定了CPU、MEM等资源大小，然而登入的POD中查询资源，却还是N https://kubeservice.cn/2021/04/21/k8s-kubelet/ Wed, 21 Apr 2021 00:00:00 +0000 https://kubeservice.cn/2021/04/21/k8s-kubelet/ kubernetes kubelet agent 来管理 Node节点上 Pod生命周期，并且管理 Node device、Pod与Node binding调度的核心进程 核心能力 从官方的架构图中很容易 https://kubeservice.cn/2021/03/21/k8s-setting-container-data-path/ Sun, 21 Mar 2021 00:00:00 +0000 https://kubeservice.cn/2021/03/21/k8s-setting-container-data-path/ 变更 Kubernetes Container 数据盘路径 避免 Linux 系统盘 no space left on device 问题，主要是容器images 和 容器log Docker 运行时 注意事项 如果节点上容器运行时是 Docker，想要变更 https://kubeservice.cn/2020/09/01/jobs-beike/ Tue, 01 Sep 2020 00:00:00 +0000 https://kubeservice.cn/2020/09/01/jobs-beike/ 基础研发部简介 基础研发部负责集团部分基础服务研发，并支撑PaaS平台架构升级，提供高扩展性基础组件，为集团业务提供基础能力和稳定保障。 招聘对 https://kubeservice.cn/2020/08/29/ecology-k8s-1-19/ Sat, 29 Aug 2020 00:00:00 +0000 https://kubeservice.cn/2020/08/29/ecology-k8s-1-19/ Kubernetes 1.19 版本 release ReleaseNote: https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG/CHANGELOG-1.19.md 通用临时卷 新的通用临时卷（Generic ephemeral volumes）功能允许将任何支持动态配置的现有存储驱动程序用作临时卷，并将卷的生命 https://kubeservice.cn/notes/cloudnative/ Tue, 18 Aug 2020 00:00:00 +0000 https://kubeservice.cn/notes/cloudnative/ 云原生社区 https://kubeservice.cn/2020/05/09/fault-node-disk-full/ Sat, 09 May 2020 00:00:00 +0000 https://kubeservice.cn/2020/05/09/fault-node-disk-full/ Kubernetes Node 磁盘爆满问题排查 原因分析 kubelet 有gc和驱逐机制，通过 --image-gc-high-threshold, --image-gc-low-threshold, --eviction-hard, --eviction-soft, --eviction-minimum-reclaim 等参数控制 kubelet 的 gc 和驱逐策略来释放磁盘空间，如果配置正确的情况下，磁盘一般不会爆 https://kubeservice.cn/2020/04/17/fault-node-crash-and-vmcore/ Fri, 17 Apr 2020 00:00:00 +0000 https://kubeservice.cn/2020/04/17/fault-node-crash-and-vmcore/ Kubernetes Node Kernel Crash 问题排查 kexec 和 kdump 安装kernel Crash dump工具 $ yum install -y kexec-tools $ yum install -y system-config-kdump 目前大多 Linux 发新版都会默认开启 kdump 服务，以方便在内核崩溃的时候, 可以通过 https://kubeservice.cn/2020/04/01/cloudnative-knowledge-map/ Wed, 01 Apr 2020 00:00:00 +0000 https://kubeservice.cn/2020/04/01/cloudnative-knowledge-map/ div.notices { margin: 2rem 0; position: relative; } div.notices p { padding: 15px; white-space: pre-wrap; display: block; margin-top: 0rem; margin-bottom: 0rem; color: #666; } div.notices p:first-child:before { position: absolute; top: 2px; color: #fff; font-family: "Font Awesome 5 Free"; font-weight: 900; content: "\f06a"; left: 10px; } div.notices p:first-child:after { position: absolute; top: 2px; color: #fff; left: 3rem; } div.notices.info p { border-top: 30px solid #F0B37E; background: #FFF2DB; } div.notices.info p:first-child:after { https://kubeservice.cn/2020/03/29/ecology-k8s-1-18/ Sun, 29 Mar 2020 00:00:00 +0000 https://kubeservice.cn/2020/03/29/ecology-k8s-1-18/ Kubernetes 1.18 版本 release v1.18版本更新比较大的，自运维能力的提升。 核心集中在 deprecations, metrics , kubectl 和 node 方面 ReleaseNote: https://github.com/kubernetes/kubernetes/blob/master/CHANGELOG/CHANGELOG-1.18.md kubectl 1. 添加kubectl debug 命令，可通过此命令来调试 Kubernetes 中的 https://kubeservice.cn/2020/03/04/k8s-pod-directional-migration/ Wed, 04 Mar 2020 00:00:00 +0000 https://kubeservice.cn/2020/03/04/k8s-pod-directional-migration/ Kubernetes中支持Pod定向迁移问题 原生的 K8s 并不支持将指定的 Pod 从当前节点迁移到另外一个指定的节点上。但是我们可以基于 K8s 提供的扩展能力 https://kubeservice.cn/2020/01/17/kubenetes-container-network-interface-2/ Fri, 17 Jan 2020 00:00:00 +0000 https://kubeservice.cn/2020/01/17/kubenetes-container-network-interface-2/ CNI（第二篇） 介绍 CNI（容器网络接口）是一个规范SPEC。 如何配置调用： 请查看CNI SPEC CNI包括几部分： golang SDK Lib, 用于集成实现网络通信接口； https://kubeservice.cn/2020/01/15/kubenetes-container-network-interface-1/ Wed, 15 Jan 2020 00:00:00 +0000 https://kubeservice.cn/2020/01/15/kubenetes-container-network-interface-1/ CNI（第一篇） 介绍 CNI（容器网络接口）是一个规范和库，用于编写用于在Linux容器中配置网络接口的插件以及许多受支持的插件组成。 CNI包 https://kubeservice.cn/2019/12/13/k8s-docker-tuning/ Fri, 13 Dec 2019 00:00:00 +0000 https://kubeservice.cn/2019/12/13/k8s-docker-tuning/ 上传/下载调优 调整 Docker 镜像下载最大并发数 通过配置镜像上传\下载并发数max-concurrent-downloads,max-concurre https://kubeservice.cn/2019/12/12/k8s-etcd-tuning/ Thu, 12 Dec 2019 00:00:00 +0000 https://kubeservice.cn/2019/12/12/k8s-etcd-tuning/ 今天双12，帮媳妇抢购之余，写写博客 😄 磁盘 IOPS 调整 etcd 对磁盘写入延迟非常敏感，通常需要 50 顺序写入 IOPS(例如: 7200RPM 磁盘)。对于负载较重的集群，建 https://kubeservice.cn/2019/12/12/k8s-linux-kernel-tuning/ Thu, 12 Dec 2019 00:00:00 +0000 https://kubeservice.cn/2019/12/12/k8s-linux-kernel-tuning/ Linux kernel 调优 在/proc/sys目录下存放着大多数的内核参数，并且设计成可以在系统运行的同时进行更改, 可以通过更改/proc/sys中内核参数对 https://kubeservice.cn/2019/04/17/k8s-custom-controller-high-available/ Wed, 17 Apr 2019 00:00:00 +0000 https://kubeservice.cn/2019/04/17/k8s-custom-controller-high-available/ 自定义 controller 通常要求只能有一个实例在工作，但是为了保证高可用，就需要有一个选主的机制，保证在 leader 因为某个异常挂掉后，其他节点可以提升为 leader https://kubeservice.cn/2019/04/02/k8s-custom-controller/ Tue, 02 Apr 2019 00:00:00 +0000 https://kubeservice.cn/2019/04/02/k8s-custom-controller/ kubernetes 的 controller-manager 通过 APIServer 实时监控内部资源的变化情况，通过各种操作将系统维持在一个我们预期的状态上。比如当我们将 Deployment 的副本数增加时，controller-m https://kubeservice.cn/2019/03/24/k8s-crd-authorization/ Sun, 24 Mar 2019 00:00:00 +0000 https://kubeservice.cn/2019/03/24/k8s-crd-authorization/ 对于一个多个用户的集群而言，通常单个用户只有自己 namespace 的相关权限，而 kubernetes CRD 需要配置额外的权限才能使用。 在 kubernetes 自定义资源(CRD) 一文中，我们尝试创建 https://kubeservice.cn/2019/03/20/k8s-crd/ Wed, 20 Mar 2019 00:00:00 +0000 https://kubeservice.cn/2019/03/20/k8s-crd/ 在研究 Service Mesh 的过程中，发现 Istio 很多参数都通过 kubernetes CRD 来管理，例如 VirtualService 和 DestinationRule，这种方式使部署在 k8s 集群上的服务的管理方式更趋向一 https://kubeservice.cn/2018/12/11/k8s-setting-pod-prestop/ Tue, 11 Dec 2018 00:00:00 +0000 https://kubeservice.cn/2018/12/11/k8s-setting-pod-prestop/ Pod preStop 设置经验 若业务代码中没有处理 SIGTERM 信号，或者你无法控制使用的第三方库或系统来增加优雅终止的逻辑，也可以尝试为 Pod 配置下 preStop，在这里面 https://kubeservice.cn/2018/12/10/a-connect-timeout-problem-caused-by-k8s-pod-deleting/ Mon, 10 Dec 2018 00:00:00 +0000 https://kubeservice.cn/2018/12/10/a-connect-timeout-problem-caused-by-k8s-pod-deleting/ 基于 k8s 调试自研 Basa内部云平台 方案时，发现更新服务时，会有少量请求耗时剧增。跟踪排查后确认是由于 Pod 被删除后，原先的 Pod 的 IP 不存在，客户端建立 https://kubeservice.cn/2018/08/21/k8s-setting-request-limit/ Tue, 21 Aug 2018 00:00:00 +0000 https://kubeservice.cn/2018/08/21/k8s-setting-request-limit/ Request 与 Limit 使用设置的经验 如何为容器配置 Request 与 Limit? 这是一个即常见又棘手的问题，这个根据服务类型，需求与场景的不同而不同，没有固定的答案，这里结合生产经 https://kubeservice.cn/2018/08/02/k8s-docker-log-big/ Thu, 02 Aug 2018 00:00:00 +0000 https://kubeservice.cn/2018/08/02/k8s-docker-log-big/ 测试集群中，Node节点经常会出现No space left on device的问题，只能不定期清理log、tmp和docker logs 原因： 每个docker容器都往s https://kubeservice.cn/2018/06/26/securely-maintain-or-offline-node/ Tue, 26 Jun 2018 00:00:00 +0000 https://kubeservice.cn/2018/06/26/securely-maintain-or-offline-node/ 安全维护或下线节点 有时候我们需要对节点进行维护或进行版本升级等操作，操作之前需要对节点执行驱逐 (kubectl drain)，驱逐时会将节点上的 Pod 进行删除， https://kubeservice.cn/2018/06/24/pod-split-up-scheduling/ Sun, 24 Jun 2018 00:00:00 +0000 https://kubeservice.cn/2018/06/24/pod-split-up-scheduling/ Pod 打散几种处理方法 将 Pod 打散调度到不同地方，可避免因软硬件故障、光纤故障、断电或自然灾害等因素导致服务不可用，以实现服务的高可用部署。 Kubernetes 支持两 https://kubeservice.cn/2018/04/12/golang-cross-compile/ Thu, 12 Apr 2018 00:00:00 +0000 https://kubeservice.cn/2018/04/12/golang-cross-compile/ golang 相比 c/c++ 的优势之一是更容易编写出跨平台的应用，而不需要为各个平台编写适配代码。和 JAVA 相比，对系统环境要求较低，不需要预先安装 JDK 等适配环境。 go build https://kubeservice.cn/notes/servicecomb-golang-framework/ Wed, 14 Feb 2018 00:00:00 +0000 https://kubeservice.cn/notes/servicecomb-golang-framework/ ServiceComb Golang Framework https://kubeservice.cn/2018/02/11/golang-commpressed-binary-file/ Sun, 11 Feb 2018 00:00:00 +0000 https://kubeservice.cn/2018/02/11/golang-commpressed-binary-file/ golang 二进制文件编译后，特别大， 不利于私有化部署和执行。 特别是kubernetes 安装，附带上etcd、coredns、kubeadm 以及 云平台 https://kubeservice.cn/2017/11/03/hello-world/ Sat, 04 Nov 2017 00:00:00 +0000 https://kubeservice.cn/2017/11/03/hello-world/ “Yeah It’s on. ” Hello World! https://kubeservice.cn/about/ Mon, 01 Jan 0001 00:00:00 +0000 https://kubeservice.cn/about/ 关于我 Hi，我是董江，容器技术布道者及实践者，中国移动高级系统架构专家，曾担任华为云核心网技术专家，Apache ServiceComb(CNCF Sandbox) 开源者、CloudNat https://kubeservice.cn/search/placeholder/ Mon, 01 Jan 0001 00:00:00 +0000 https://kubeservice.cn/search/placeholder/ https://kubeservice.cn/top/about/ Mon, 01 Jan 0001 00:00:00 +0000 https://kubeservice.cn/top/about/ 关于我 Hi，我是董江，容器技术布道者及实践者，中国移动高级系统架构专家，曾担任华为云核心网技术专家，Apache ServiceComb(CNCF Sandbox) 开源者、CloudNat https://kubeservice.cn/archive/ Mon, 01 Jan 0001 00:00:00 +0000 https://kubeservice.cn/archive/