删除多个 pod 后 Kubernetes 持久卷数据损坏

Question

我正在为 official event store image 的一个简单副本部署而苦苦挣扎在 Kubernetes 集群上。我正在使用持久卷进行数据存储。

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: my-eventstore
spec:
  strategy:
    type: Recreate
  replicas: 1
  template:
    metadata:
      labels:
        app: my-eventstore
    spec:
      imagePullSecrets:
        - name: runner-gitlab-account
      containers:
        - name: eventstore
          image: eventstore/eventstore
      env:
        - name: EVENTSTORE_DB
          value: "/usr/data/eventstore/data"
        - name: EVENTSTORE_LOG
          value: "/usr/data/eventstore/log"
      ports:
        - containerPort: 2113
        - containerPort: 2114
        - containerPort: 1111
        - containerPort: 1112
      volumeMounts:
        - name: eventstore-storage
          mountPath: /usr/data/eventstore
  volumes:
    - name: eventstore-storage
      persistentVolumeClaim:
        claimName: eventstore-pv-claim

这是我的持久卷声明的 yaml:

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: eventstore-pv-claim
spec:
  accessModes:
    - ReadWriteOnce
 resources:
    requests:
      storage: 1Gi

部署工作正常。当我测试耐用性时，我开始遇到问题。我删除了一个 pod 以强制从期望状态变为实际状态，然后查看 Kubernetes 的 react 。

它立即启动了一个新的 pod 来替换已删除的 pod。并且管理 UI 仍然显示相同的数据。但是第二次删除一个pod后，新的pod没有上来。根据此讨论，我收到一条错误消息，指出“记录太大”，表明数据已损坏。 https://groups.google.com/forum/#!topic/event-store/gUKLaxZj4gw

我又试了几次。每次都是一样的结果。第二次删除 pod 后，数据已损坏。这让我担心实际的失败会导致类似的结果。

但是，当部署新版本的图像或将部署中的 pod 缩放为零并返回到一时，不会发生数据损坏。经过几次尝试一切都很好。这很奇怪，因为它也完全取代了 pod(我检查了 pod id，它们改变了)。

这让我想知道使用 kubectl delete 删除 pod 是否在某种程度上以终止 pod 的方式更有力。你们有没有类似的经历？关于删除是否/如何不同的见解？预先感谢您的输入。

问候，

奥斯卡

Answer 1

我在 Github 上提到了这个 pull request，它指出进程没有被正确终止:https://github.com/EventStore/eventstore-docker/pull/52

使用拉取请求中的 Docker 文件构建新镜像后，将此镜像放入部署中。我正在左右杀死 pod，不再有数据损坏问题。

希望这对面临同样问题的人有所帮助。