python - 如何在一个容器中运行 Flask 和 celery？

Question

我想在 digitalocean 上使用 docker 部署我的小型 Web 应用程序。问题是，我没有将 flask + celery 分开，所以所有东西都在一个容器中。每次我运行docker-compose up Web 容器崩溃(“以代码 0 退出”)。

项目结构如下:

.
.
├── docker-compose.yml
├── nginx
│   ├── dockerfile
│   └── nginx.conf
└── web
    ├── app.ini
    ├── bot
    │   ├── __init__.py
    │   ├── main.py
    │   ├── __pycache__
    │   └── timer.py
    ├── celeryd.pid
    ├── config.py
    ├── dockerfile
    ├── dockerignore
    ├── flask_app.py
    ├── __init__.py
    ├── requirements.txt
    ├── tasks.py
    └── webapp
        ├── bot
        ├── __init__.py
        ├── models.py
        ├── __pycache__
        ├── static
        ├── templates
        └── users

这是 docker-compose.yml:

version: "3.7"

services:

  rabbitmq:
    image: rabbitmq:3-management
    hostname: rabbitmq
    container_name: rabbitmq
    environment:
      RABBITMQ_ERLANG_COOKIE: 'SWQOKODSQALRPCLNMEQG'
      RABBITMQ_DEFAULT_USER: 'user123'
      RABBITMQ_DEFAULT_PASS: 'password123'
      RABBITMQ_DEFAULT_VHOST: '/webapp'
    ports:
      - "15672:15672"
      - "5672:5672"
    volumes:
      - rabbitmq_storage:/var/lib/rabbitmq
    networks:
      netzwerk123:
        aliases:
          - rabbitmq

  db:
    image: mariadb
    restart: always
    container_name: db
    environment:
      MYSQL_ROOT_PASSWORD: 'password123'
      MYSQL_USER: 'user123'
      MYSQL_PASSWORD: 'password123'
      MYSQL_DATABASE: 'webapp'
    ports:
      - "3306:3306"
    volumes:
      - db_storage:/var/lib/mysql
    networks:
      netzwerk123:
        aliases:
          - db


  nginx:
    build: ./nginx  
    container_name: nginx
    restart: always
    ports:  
      - "80:80"
    networks:
      netzwerk123:
        aliases:
          - ngnix


  web:
    build: ./web  
    container_name: web
    hostname: web
    restart: always
    environment:    
      FLASK_DEBUG: 'True'
      FLASK_APP: 'flask_app.py'
    command: celery -A tasks.celery worker --loglevel=info --detach
    expose:
      - 8080
    networks:
      netzwerk123:
        aliases:
          - web
    depends_on:     
      - nginx
      - db
      - rabbitmq
    links:
      - rabbitmq
    tty: true
    stdin_open: true


  adminer:        #only for development purposes
    image: adminer
    container_name: adminer
    restart: always
    ports:
      - "8081:8080"
    depends_on:
      - db
    networks:
      netzwerk123:
        aliases:
          - adminer



volumes:                                    
  db_storage:
  rabbitmq_storage:

networks:
  netzwerk123:

如果我评论"command: celery -A tasks.celery worker --loglevel=info --detach"一切都运行得很好，因为 celery 没有运行。网页功能齐全，数据库处于事件状态。一切都很好，除了 celery 。

通过取消注释命令行，docker 会抛出“web exited with error code 0”。

我猜这是因为 docker 在成功执行命令后退出了容器。所以我面临两个问题:

1)如何在同一个celery容器的后台运行celery，这样就不会出现错误代码0？

2)如何在容器中并行运行 celery 和 Flask？

-> 我已经尝试过以下操作，但出现同样的错误:

command: bash -c "uwsgi app.ini && celery -A tasks.celery worker --loglevel=info --detach"

非常感谢任何帮助:)

编辑:我将 celery + flask 放在一个容器中的原因是我的task.py。在这里，我从 web.webapp.models 导入所有 sqlalchemy 模型。所以我需要访问 Flask 目录，目前我没有看到如何将其分成两个容器的方法

Answer 1

如果您需要在两个不同进程之间“共享”的唯一内容是代码，那么它已经存在于构建的 Docker 镜像中。您可以非常轻松地在同一个镜像上运行两个不同的容器，但使用不同的命令。

services:
  web:
    build: ./web  
    environment:    
      FLASK_DEBUG: 'True'
      FLASK_APP: 'flask_app.py'
    command: flask run --host=0.0.0.0
    depends_on:     
      - nginx
      - db
      - rabbitmq
  celery:
    build: ./web  
    restart: always
    command: celery -A tasks.celery worker --loglevel=info
    depends_on:     
      - db
      - rabbitmq

请注意，两者构建:相同的图像。另外，我将 celeryworker 设置为非 --detach，因此它作为前台进程运行；只要命令:仍在运行，容器就会保持运行。

(要使该片段在原始 docker-compose.yml 文件的上下文中工作，您需要彻底删除整个文件中的所有 networks: block 文件，但它会正常工作:Docker Compose 创建一个默认网络，并使用其服务 block 的名称将所有服务附加到该网络。我还删除了许多其他无关紧要的选项。)