azure - Kubernetes NodeLost/NotReady/高 IO 磁盘

Question

我在生产环境中遇到了一个非常复杂的 Kubernetes 问题，丢失了所有代理节点，它们从 Ready 变为 NotReady，所有 pod 从 Running 变为 NodeLost 状态。我发现 Kubernetes 正在大量使用磁盘:

我的集群是使用 acs-engine 0.17.0 部署的(我也测试了以前的版本，也发生了同样的情况)。

另一方面，我们决定部署包含 Premium 磁盘的 Standard_DS2_VX VM 系列，并将 IOPS 增加到 2000(之前低于 500 IOPS)，并且发生了同样的事情。我现在要尝试更高的数字。

对此的任何帮助将不胜感激。

Answer 1

这是一个耗尽资源的微服务，然后 Kubernetes 只是停止节点。我们致力于建立基于资源/限制的机制，以便避免整个集群中断。