elasticsearch - MetricBeat kubernetes.apiserver : error getting metrics

Question

我们在 Kubernetes 集群上部署了 metricbeat。所有指标都被推送到 elasticsearch 索引，没有任何问题。但是在 metribeat 日志中观察到以下错误，并且不确定究竟是什么导致了这种情况。

2020-07-01T14:05:25.421Z     INFO    module/wrapper.go:259   Error fetching data for metricset kubernetes.apiserver: error getting metrics: unexpected status code 403 from server

我们已经探索并尝试了建议的集群角色，但没有看到任何成功。下面是我们正在使用的集群角色。

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: metricbeat
  labels:
    k8s-app: metricbeat
rules:
  - apiGroups:
      - "extensions"
      - "apps"
      - "v1"
      - ""
    resources:
      - namespaces
      - pods
      - events
      - deployments
      - nodes
      - replicasets
      - statefulsets
      - nodes/metrics
      - nodes/stats
    verbs:
      - get
      - list
      - watch

让我知道是否有人遇到过相同的问题并修复了它。提前致谢。

Answer 1

看起来 Metricbeat 无法连接到 K8S API 服务器，HTTP 403 是一个安全错误。
根据 the official documentation ，您能否确保将这些添加到 ClusterRole 规则中:

rules:
- nonResourceURLs:
  - /metrics
  verbs:
  - get