Kubernetes(k8s)中如何排查集群中Pod的高负载问题？

1. 资源监控：使用kubectl top pod查看Pod的CPU/内存消耗，结合Prometheus+Grafana监控历史趋势，确认资源是否超限或突增。
2. 日志分析：通过kubectl logs或集中式日志平台（如ELK）检查Pod日志，定位异常请求、错误堆栈或高频操作。
3. 性能剖析：对Pod内进程进行性能分析（如Java的Arthas、Go的pprof），识别CPU密集型或阻塞操作。
4. 网络延迟：检查Pod间通信及外部依赖服务的延迟（如istio链路追踪），排除网络瓶颈或DNS问题。
5. 存储瓶颈：若Pod涉及持久化存储，监控磁盘IO（如iostat）及PVC性能，避免存储延迟拖累应用。
6. 调度均衡：通过kubectl describe node确认节点负载分布，调整反亲和性策略或HPA参数避免热点。
7. 配置检查：验证Pod的requests/limits合理性，避免资源争抢；检查JVM堆等应用级参数是否适配当前负载。
8. 进程级排查：进入Pod执行top或pidstat，确认是业务进程还是Sidecar（如日志Agent）占用资源。
9. 集群事件：通过kubectl get events查找OOMKilled、驱逐事件等关联线索，结合监控定位根因。

先看哪个Pod最吃资源，用kubectl top pod查CPU和内存。然后kubectl logs看日志有没有报错，kubectl describe pod看状态是不是OOM或者被杀了。再检查Requests/Limits设置是不是太抠，用kubectl exec进容器里top看看具体哪个进程在搞事情。节点负载高的话还要kubectl describe node看资源分配，不行就加节点或者调调度策略。

1. 资源监控分析：使用kubectl top pod查看Pod的CPU/内存实时使用情况，结合Prometheus+Grafana分析历史趋势，判断是否因资源不足触发负载飙升。

2. 日志排查：通过kubectl logs或集中式日志系统（如Loki）检查Pod日志，定位异常错误（如死循环、频繁GC）或外部依赖超时。

3. 进程级诊断：对高负载Pod执行kubectl exec进入容器，使用top/htop或pidstat分析进程级资源占用，确认是否为应用自身问题。

4. 网络瓶颈检查：通过kubectl describe svc和网络监控（如Cilium Hubble）检测网络延迟、连接数激增或跨节点流量异常。

5. 存储性能验证：若Pod依赖持久卷，使用kubectl describe pvc检查存储后端性能（如IOPS延迟），避免因存储拖累应用。

6. 调度与竞争分析：通过kubectl describe node查看节点资源分配，结合Pod亲和性策略，排查因资源碎片化导致的调度争抢。

7. 应用性能剖析：注入Sidecar（如Pyroscope）或使用perf/pprof工具进行火焰图分析，定位代码热点（如锁竞争、低效算法）。

8. K8s事件回溯：通过kubectl get events --sort-by=.metadata.creationTimestamp查看集群事件，识别驱逐（Eviction）或OOMKilled等关联告警。