docker - 如何在 kubernetes 上为 Google Cloud composer apt-get 安装包

Question

我正在使用 Cloud composer 来编排我的 Airflow 实例，但不确定如何为 Airflow 工作器 bash 安装软件包。

以前我使用 docker 在谷歌计算引擎实例上运行 Airflow ，通过 docker make 文件很容易指定需求。

作为 kubernetes 和 Cloud composer 的新手，我想知道我是否可以像以前为 docker 做的那样对 kubernetes/Cloud composer 做一些类似的事情？

我想安装 lzop对于 unix，还需要使用 s3 凭据更新 gsutil boto 配置文件。

你如何将一个新的 docker 镜像拉入 kubernetes 并为 pod 重新创建它？

对不起，如果我的行话不正确，这对我来说是新的

Answer 1

目前，如果我正确阅读了文档，则无法修改 Composer 使用的图像。除非您将自定义解决方案部署在 Kubernetes 集群上，否则我认为您无法将其扩展到 Python 库和 Airflow 插件之外。

您可以通过 ssh 连接到每个工作 Compute Engine 实例并在每台机器上手动安装它。

您可以尝试运行 apt它通过 BashOperator ，但我怀疑你会成功；不幸的是，Composer 仍然是 Beta 产品，许多功能仍在制作中。