docker - Kubernetes 裸机 NFS PVs 错误与 elasticsearch helm 图表

Question

我使用 conjure-up kubernetes 在裸机专用服务器上部署了 Kubernetes在 Ubuntu 18.04 LTS 上。这也意味着节点是 LXD 容器。

我需要 Elasticsearch 和 MongoDB 的持久卷，经过一些研究后，我决定在我的部署中使用它的最简单方法是 NFS 共享。
我在主机操作系统中创建了一个 NFS 共享，配置如下:

/srv/volumes 127.0.0.1(rw) 10.78.69.*(rw,no_root_squash)

10.78.69.*似乎是Kubernetes使用的桥接网络，至少看ifconfig没有别的。

然后我开始创建两个文件夹，/srv/volumes/1 和/srv/volumes/2
我从这些文件夹中创建了两个 PV，第一个具有此配置(第二个类似):

apiVersion: v1
kind: PersistentVolume
metadata:
  name: elastic-pv1
spec:
  capacity:
    storage: 30Gi
  accessModes:
    - ReadWriteOnce
  persistentVolumeReclaimPolicy: Retain
  nfs:
    path: /srv/volumes/1
    server: 10.78.69.1

然后我部署了 Elasticsearch helm 图表 ( https://github.com/helm/charts/tree/master/incubator/elasticsearch)，它创建了两个成功绑定(bind)到我的 PV 的声明。

问题是之后容器似乎遇到了错误:

Error: failed to start container "sysctl": Error response from daemon: linux runtime spec devices: lstat /dev/.lxc/proc/17848/fdinfo/24: no such file or directory Back-off restarting failed container

Pods view

Persistent Volume Claims view

我有点卡在这里。我已尝试搜索错误，但无法找到解决此问题的方法。

之前我在 /etc/exports 中设置了允许的 IP至 10.78.69.* Kubernetes 会告诉我它在尝试挂载时从 NFS 服务器获得“权限被拒绝”，所以我假设现在挂载成功，因为该错误消失了。

编辑:

我决定清除 helm 部署并重试，这次使用不同的存储类型，本地存储卷。我按照 Canonical 的指南创建了它们，并且我知道它们可以工作，因为我以这种方式为 MongoDB 设置了一个，并且效果很好。

elasticsearch helm 部署的配置发生了变化，因为现在我必须为创建持久卷的节点设置关联:
values.yaml :

data:
    replicas: 1,
    nodeSelector:
        elasticsearch: data
master:
    replicas: 1,
    nodeSelector:
        elasticsearch: master
client:
    replicas: 1,
cluster:
    env: {MINIMUM_MASTER_NODES: "1"}

我部署使用

helm install --name site-search -f values.yaml incubator/elasticsearch

这些是唯一的变化，但是 Elasticsearch 仍然存在相同的问题。

附加信息:
kubectl version :

Client Version: version.Info{Major:"1", Minor:"11", GitVersion:"v1.11.3", GitCommit:"a4529464e4629c21224b3d52edfe0ea91b072862", GitTreeState:"clean", BuildDate:"2018-09-09T18:02:47Z", GoVersion:"go1.10.3", Compiler:"gc", Platform:"linux/amd64"}
Server Version: version.Info{Major:"1", Minor:"11", GitVersion:"v1.11.3", GitCommit:"a4529464e4629c21224b3d52edfe0ea91b072862", GitTreeState:"clean", BuildDate:"2018-09-09T17:53:03Z", GoVersion:"go1.10.3", Compiler:"gc", Platform:"linux/amd64"}

elasticsearch 图像是 helm chart 中的默认图像:

docker.elastic.co/elasticsearch/elasticsearch-oss:6.4.1

各种 pod(master、client、data)的日志都是空的。
错误是一样的。

Answer 1

我能够通过运行 sysctl -w vm.max_map_count=262144 来解决这个问题我自己在主机上，并删除了试图这样做失败的“sysctl”初始化容器。