kubernetes - 我们在opsgenie中收到KubepiLatencyHigh错误

Question

嗨，我们在opsgenie中遇到错误
错误:对于GET节点，API服务器的99％延迟为5.21555555555553秒。

所以请帮忙解决这个问题

描述:
1. [INT_Prometheus]:[FIRING:3] KubeAPILatencyHigh(https apiserver默认监控/ k8s 0.99 kubernetes 3)

资源
/＃/ alerts？receiver = opsgenie
积分
INT_PROMETHEUS(普罗米修斯)
回应者
FCA_EMEA
业主团队
FCA_EMEA
别名
-警报名称= KubeAPILatencyHigh-端点= https-作业= apiserver- namespace =默认-Prometheus =监视/ k8s-分位数= 0.99-资源=节点-作用域=群集-服务= kubernetes-严重性= 3-动词= GET
上次更新时间:
2020年4月28日上午7:59
描述
警报触发:
标签:
-警报名称= KubeAPILatencyHigh
-端点= https
-作业= apiserver
- namespace =默认
-普罗米修斯=监控/ k8s
-分位数= 0.99
-资源=节点
-范围=集群
-服务= kubernetes
-严重程度= 3
-动词= GET
注释:
-消息=对于GET节点，API服务器的第99个百分位数延迟为5.21555555555553秒。
小号
标签:
-警报名称= KubeAPILatencyHigh
-端点= https
-作业= apiserver
- namespace =默认
-普罗米修斯=监控/ k8s
-分位数= 0.99
-资源= pod
-作用域= namespace
-服务= kubernetes
-严重程度= 3
-动词= GET
注释:
-消息=对于GET Pod，API服务器的第99个百分位数延迟为8秒。

标签:
-警报名称= KubeAPILatencyHigh
-端点= https
-作业= apiserver
- namespace =默认
-普罗米修斯=监控/ k8s
-分位数= 0.99
-资源= pod
-作用域= namespace
-服务= kubernetes
-严重程度= 3
-子资源=状态
-动词= PUT
注释:
-消息=对于PUT容器，API服务器的第99个百分位数延迟为8秒。

Answer 1

Kubernetes API服务器使用ETCD作为所有kubernetes对象的后备存储。我将从查看ETCD服务器的日志开始。还要在EtcdHighCommitDurations，EtcdHighFsyncDurations和EtcdHighNumberOfFailedGRPCRequests上设置警报，以了解ETCD是否存在任何问题。