网站建设业绩,做乐高肖像的网站,163企业邮箱登陆登录入口,济南外贸网站制作K8S集群中Node节点资源不足导致Pod无法运行的故障排查思路
Node节点资源不足可能会产生的故障
故障一#xff1a;Pod数量太多超出物理节点的限制每一台Node节点中默认限制最多运行110个Pod资源#xff0c;当一个应用程序有成百上千的Pod资源时#xff0c;如果不扩容Node节…K8S集群中Node节点资源不足导致Pod无法运行的故障排查思路
Node节点资源不足可能会产生的故障
故障一Pod数量太多超出物理节点的限制每一台Node节点中默认限制最多运行110个Pod资源当一个应用程序有成百上千的Pod资源时如果不扩容Node节点或者修改最大Pod数量限制那么就会导致部分Pod资源无法正常运行因为节点已经没有资源可以被调度了。解决思路就是扩容Node节点数量或者修改Pod的数量限制故障二Pod配置的资源限额超出物理节点的最大使用率由于Node节点资源有限当Pod设置的资源配额超出了Node节点所承受的极限那么Pod将无法部署和运行会报错没有合适的Node节点可调度。解决思路就是对资源限方面重新调整适当扩展节点资源。
Node节点资源不足故障排查案例一 故障描述 Pod资源数量过多超出节点调度Pod的数量。 当Pod资源数量太多已经达到了Node节点默认的110个Pod时新创建的Pod资源会一直处于Pending状态并且大量的Pod会频繁重启。 排查思路 首先查看Pod的详细信息重点观察容忍的信息通常情况下会看到下面的信息从这个信息中我们就可以判断出是由于节点资源上限从而引发的问题。 Tolerations: node.kubernetes.io/not-ready:NoExecute opExists for 300s node.kubernetes.io/unreachable:NoExecute opExists for 300s
Events: none#正常的情况下下是没有for 300s 提示的这句话的意思是说300秒内都没有通过容忍调度在Node节点产生了超时。查看Node节点的详细信息如果是资源使用上限的问题会看到如下的报错信息。 Warning SystemOOM 78s kubelet System OOM encountered, victim process: java, pid: 5879通过在查看Node节点的详细信息可以看到Kubelet组件触发了OOM机制接下来去排查Kubelet。 38506 kubelet_pods.go:880] Unable to retrieve pull secret ms/registry-pull-secret for ms/eur...t succeed从Kubelet的报错日志中可以看到不能拉取secret资源结合Pod中容忍提示的信息最有可能出现的原因就是资源不够用了。 排查Node节点中各项资源指标的使用情况CPU、内存、磁盘。 都没有问题后在查看该Node节点中运行了多少个Pod资源如果超过110个那么就可以定位问题了每个Node节点默认只允许运行110个Pod超出限制后无法调度。 解决方法就是修改默认的Pod数量但是也要根据机器硬件性能做出合理的调整。
Node节点资源不足故障排查案例二 故障描述 Pod一直处于Pending状态。 排查过程 查看Pod的详细信息可以获得关键的信息。 default-scheduler 0/3 nodes are available: 2 Insufficient memory, 2 node(s) had taint {node-role.kubernetes.io/master: }, that the pod didnt tolerate.从Pod的详细信息中可以得知3个节点中没有一个节点符合Pod的资源设置其中有2个节点内内存不足和一个节点是Master污点不能被容忍。 重新调整Pod的资源限制或者扩容物理节点的内存即可解决。
-----------------------------------------------------------------------------------
offer突击训练营简介
1针对不知道怎么面试面试没有信心的小伙伴我们会给你一个offer保障。
2我们会监督你15-20天内把面试体系技术点掌握至少7成这样足够你去找到满意的工作了。
3我们是面向面试学习指导不会带你们去写代码会把项目真实开发的迭代过程和技术细节如何实现业务功能都详细教清楚你能在面试中流畅表达清楚就行了项目经验你不用担心(技术老师提供的真实项目经验肯定拿的出手)自己学和别人带着系统学效率完全不一样。
详情请点击这里offer突击训练营给你一个offer的保障求职跳槽的看过来
