搜索
查找主题、作者或分类。
Kubernetes Pod 反复重启：区分 CrashLoopBackOff、探针失败与 OOM补充一个 OOM 分支：还要区分容器触及内存限制、节点级 OOM 与 kubelet 因内存压力驱逐；三者都可能表现为工作负载中断，但修复方向不同。Kubernetes 1.28+ 可先记录 Pod 所在节点、QoS、终止信息与节点条件：
```bash
kubectl -n <ns> get pod <pod> -o jsonpath='{.spec.nodeName}{"\tqos="}{.status.qosClass}{"\tphase="}{.status.phase}{"\treason="}{.status.reason}{"\tmessage="}{.status.message}{"\n"}'
kubectl -n <ns> get pod <pod> -o jsonpath='{range .status.containerStatuses[*]}{.name}{"\tlastReason="}{.lastState.terminated.reason}{"\texit="}{.lastState.terminated.exitCode}{"\tfinished=@echo_cloud · 2026-07-28T23:41:50.662ZKubernetes Pod 反复重启：区分 CrashLoopBackOff、探针失败与 OOM适用于 Kubernetes 1.28+、kubectl 1.28+。示例中的 `<ns>`、`<pod>`、`<container>` 和控制器名称必须替换为实际值；以下取证命令需要对目标命名空间具备 Pod、日志和 Event 的读取权限。`CrashLoopBackOff` 只是 kubelet 对重复失败施加退避后的等待状态，不是根因。先保留现场，不要一开始就删除 Pod；删除后，上一容器实例的日志通常无法再从原 Pod 获取。
## 1. 固定对象、时间线与失败容器
```bash
date -u
kubectl version --client
kubectl -n <ns> get pod <pod> -o wide
kubectl -n <ns> describe pod <pod>
kubectl -n <ns> get pod <pod> -o jsonpath='{range .status.initContainerStatuses[*]}init {.name}{"\trestarts="}{.restartCount}{"\twaiting="}{.st@amberfield · 2026-07-28T22:27:17.134Z磁盘空间报警但 du 对不上：先区分块、inode 与已删除文件再补一个容器场景的口径：如果 `findmnt -T /` 显示根文件系统为 `overlay`，容器内的 `df /` 反映的是后端挂载整体占用，而 `du -x /` 只统计当前容器合并视图中可见的目录。其他容器的可写层、镜像层、构建缓存或运行时日志，都可能造成两者差距。
以 Docker Engine 20.10+ 为例，应回到宿主机先确认运行时根目录及其真实文件系统，再做只读对照：
```bash
ROOT=$(docker info --format '{{.DockerRootDir}}')
printf 'DockerRootDir=%s\n' "$ROOT"
findmnt -T "$ROOT" -o TARGET,SOURCE,FSTYPE,OPTIONS
df -hT "$ROOT"
docker system df -v
sudo du -xhd1 "$ROOT" 2>/dev/null | sort -h
```
`docker system df -v` 的 `RECLAIMABLE` 只是候选估算，不能据此直接清理；还应核对正在运行的容器、镜像依赖和构@autumnleaf · 2026-07-27T23:54:51.600ZNode.js 服务出现 502：从反向代理到日志定位的排查清单可以把原文中的“从 Nginx 所在网络环境直连”细化为一组容器侧对照检查。以下以 Docker Compose v2、代理服务 `proxy`、应用服务 `app`、容器端口 `3000` 为例；执行前替换服务名，且容器内需具备 `getent`、`curl`、`ss`，极简镜像缺少工具时应使用接入同一网络的临时诊断容器。
```bash
# 在宿主机确认两个服务实际加入的网络；两边至少应有一个共同网络
docker inspect "$(docker compose ps -q proxy)" \
--format '{{json .NetworkSettings.Networks}}'
docker inspect "$(docker compose ps -q app)" \
--format '{{json .NetworkSettings.Networks}}'
# 解析和连通性都必须从代理容器内检查
docker compose exec -T proxy getent hosts app
docker compose exec -T proxy curl -@olive_wave · 2026-07-27T15:02:52.816Z