公告Ryan 的 SRE 之旅 —— 内容持续更新,欢迎指正。

K8s容器编排实战教程怎么学,容器编排入门教程哪里找?

2026-11-18 运维实践 0 阅读

基于 Kubernetes 的容器编排实战,真正决定落地成败的不是集群能不能跑起来,而是监控告警、自动化和故障复盘这三条线有没有形成闭环;集群搭建只是入场券,运维体系才是长期成本。下面按这个顺序拆开讲,每一步都给出可验证的命令和操作路径,方便直接对照操作。

集群搭建:先把地基打牢再谈编排

很多人卡在第一步:节点装完、kubeadm 跑完,`kubectl get nodes` 却不是 Ready。多数情况下问题出在容器运行时与内核参数没对齐,而不是 K8s 本身。

节点准备的必做动作

在每台节点上按顺序执行,不要跳步:

  • 关闭 swap,并注释掉 /etc/fstab 里的 swap 行,否则 kubelet 启动会直接报错。
  • 加载 br_netfilter 与 overlay 内核模块,写入 /etc/modules-load.d/k8s.conf 保证开机生效。
  • 打开 net.bridge.bridge-nf-call-iptables 和 ip_forward,这一步决定 Service 能否正常转发。
  • 配置 containerd:编辑 /etc/containerd/config.toml,把 SystemdCgroup 设为 true,然后 systemctl restart containerd。cgroup driver 与 kubelet 不一致是节点 NotReady 的高频原因。

控制面初始化命令带上 Pod 网段和固定 API 地址:

kubeadm init --pod-network-cidr=10.244.0.0/16 
  --control-plane-endpoint=k8s-api.example.com:6443

初始化完成后装 CNI 插件(Calico 或 Flannel 选一个),再执行 kubectl get nodes -o wide 确认全部 Ready。

集群就绪后的验收清单

不要只看节点状态就宣布完工,这几项要逐条过:

检查项 命令 通过标准
节点状态 kubectl get nodes 全部 Ready,版本一致
核心组件 kubectl get pods -n kube-system 无 CrashLoopBackOff
集群 DNS 起一个临时 Pod 执行 nslookup kubernetes.default 能正常解析
跨节点网络 两台节点上的 Pod 互相 ping 连通且延迟正常
存储 创建 PVC 并挂载到 Pod 绑定成功、可读写

中小团队 Kubernetes 集群部署成本大概落在哪个区间

成本主要由三块构成:节点计算资源、控制面可用性投入、人力。自建集群要至少 3 台控制面做高可用,加上工作节点,云主机费用按月累积;托管 K8s 服务按集群收固定管理费,节点另算。省下的是管理费,搭进去的是排障人力。近年来不少十人左右的团队直接选托管,把精力放在业务和告警上;规模再大、对调度和网络有定制需求时,自建才划算。预算评估时别漏掉日志存储和监控时序数据的开销,这部分往往比节点费用更早成为瓶颈。

Kubernetes 监控告警怎么配置:从指标采集到告警收敛

集群跑起来后,第一件要补的是可观测性。没有指标,故障复盘只能靠猜。

监控栈选型:Prometheus 仍是事实标准

组件分工要清楚:kube-state-metrics 采集集群对象状态(Deployment 副本数、Pod 重启次数、PVC 状态),node-exporter 采集节点 CPU、内存、磁盘,kubelet 内置的 cAdvisor 负责容器级资源。三者数据汇总到 Prometheus,Grafana 出图,Alertmanager 负责告警路由。行业共识认为,这套组合在 2026 年依然是自建场景里维护成本最低的选择。

告警规则怎么落地才不吵

先写一条最能说明问题的规则,Pod 反复重启:

- alert: PodCrashLooping
  expr: rate(kube_pod_container_status_restarts_total[15m]) > 0
  for: 10m
  labels:
    severity: warning
  annotations:
    summary: "Pod {{ $labels.pod }} 在 {{ $labels.namespace }} 反复重启"

几个实操要点:

分级要落到通道上
critical 走电话,warning 走即时消息,inf

告警收敛与值班减负

告警数量不等于监控质量。按服务维度聚合,同一根因只发一条;业务指标(下单失败率、接口错误率)的优先级要高于资源指标;每周统计告警量,把三个月没人处理过的规则直接删掉。这套动作坚持下来,值班负担能明显下降。

Kubernetes 和 Docker Swarm 哪个更适合生产环境

这是选型阶段问得最多的问题,直接上对比:

维度 Kubernetes Docker Swarm
学习曲线 陡,概念多 平缓,上手快
生态与工具链 完整,Operator、GitOps、可观测体系齐全 有限,多数能力需自建
有状态服务 StatefulSet 加 Operator 支持成熟 支持较弱
社区活跃度 高,版本迭代稳定 较低
适用规模 中大型、多团队协作 小规模、简单无状态场景

业内专家指出,Swarm 目前更多出现在边缘小场景和教学演示里,新项目选型基本不会再考虑。生产环境走 K8s 是更稳妥的路径,代价是要接受前期学习投入。

自动化:把重复操作交给流水线和 Operator

编排的价值在自动化上体现得最明显。手工 kubectl apply 的次数越少,事故概率越低。

GitOps 是当前较稳的落地方式

仓库即唯一事实来源。Argo CD 监听 Git 目录,集群实际状态与声明不一致时会自动同步或告警。镜像 tag 不要用 latest,用 commit SHA 或镜像 digest,回滚时才能精确到具体版本。

扩缩容与健康检查

kubectl autoscale deployment web --cpu-percent=60 --min=2 --max=10

三个探针要分清职责:livenessProbe 失败触发重启,readinessProbe 失败摘掉流量,startupProbe 给慢启动应用留足时间。探针参数配错是 Pod 反复重启的常见根因,尤其把 liveness 的初始延迟设得过短。

用 Operator 管有状态服务

MySQL、Redis、Kafka 这类服务,主从切换、备份、扩缩容都交给对应 Operator 处理,比写一堆脚本可靠。上线前先在小集群验证 Operator 的故障转移流程,别等生产出事才第一次跑。

故障复盘:一次 Pod 反复重启的排查路径

场景很典型:发布后订单服务 Pod 每隔几分钟重启一次,监控告警已经触发。

北京 Kubernetes 运维工程师常用的排查命令

按这个顺序走,多数问题能在十分钟内定位:

  1. kubectl get pods -n order -o wide,看重启次数、所在节点、Pod IP。
  2. kubectl describe pod -n order,重点看 Events、Last State 和 Exit Code。Exit Code 137 基本指向 OOMKilled 或被强制终止。
  3. kubectl logs -n order --previous,取上一次容器的日志,崩溃前的输出才是关键。
  4. kubectl get events -n order --sort-by=.metadata.creationTimestamp,还原时间线。
  5. 登上节点执行 crictl ps -a 和 journalctl -u kubelet -f,看容器运行时和 kubelet 层的报错。
  6. kubectl top pod -n order,对照 limit 判断是否触顶。

北京不少互联网公司的 SRE 团队把这几条固定成值班手册里的标准动作,新人照着走也能拿到初步结论。

复盘模板怎么写才不流于形式

有效的复盘包含五块:

时间线
精确到分钟,标出发现、响应、恢复三个节点。
根因
技术根因和流程根因分开写。技术根因是内存 limit 过小,
影响面
受影响请求数、持续时间、是否有数据不一致。
改进项
每条要有负责人和截止日期,写“加强监控”等于没写,要写成“为
复发检查
同类问题在其他服务的排查清单,一次性批量排查。

Kubernetes 容器编排实战常见问题

Kubernetes 集群需要几台机器才够用

生产环境控制面至少 3 台做高可用,工作节点从 2 台起步,按负载再加。测试环境用 kind 或 minikube 单机就够。节点规格比数量更重要,控制面建议 4 核 8G 起,工作节点看业务 Pod 的资源请求总和来算。

告警规则写多少条合适

先从可用性、容量、错误率三类起步,每条规则都要有明确的处理人和处理动作。没人认领的规则清理掉,否则告警会逐渐失去可信度。规则数量随业务复杂度增长,不需要一次性写全。

Pod 一直处于 Pending 状态先看哪里

第一步执行 kubectl describe pod,看 Events 里的调度失败原因,常见是资源不足、节点亲和性不满足、PVC 未绑定、污点未容忍这四类。接着用 kubectl describe node 看各节点的资源分配率,用 kubectl get pvc 确认存储状态。按这个顺序排查,绝大多数 Pending 都能在几分钟内找到出在调度、存储还是污点这一层。

推荐阅读

RELATED
河北名美凯利建筑工程有限公司 冀ICP备2026046508号-4