Конфигурация Docker Celery - Для проекта Django/React/Redis/Celery. Логотип Celery и фоновый журнал задач не отображаются

Не уверен, что вы ищете логотип, такой как Redis ASCII логотип, показанный ниже в вашем терминале.

                _._                
           _.-``__ ''-._           
      _.-``    `.  `_.  ''-._      
  .-`` .-```.  ```\/    _.,_ ''-._ 
 (    '      ,       .-`  | `,    )
 |`-._`-...-` __...-.``-._|'` _.-'|
 |    `-._   `._    /     _.-'    |
  `-._    `-._  `-./  _.-'    _.-' 
 |`-._`-._    `-.__.-'    _.-'_.-'|
 |    `-._`-._        _.-'_.-'    |
  `-._    `-._`-.__.-'_.-'    _.-' 
 |`-._`-._    `-.__.-'    _.-'_.-'|
 |    `-._`-._        _.-'_.-'    |
  `-._    `-._`-.__.-'_.-'    _.-' 
      `-._    `-.__.-'    _.-'     
          `-._        _.-'         
              `-.__.-'             

В любом случае, вот через что мне пришлось пройти.

Полный журнал в вашем GitHub Gist показывает, что Celery работает правильно, но он не отображает логотип Celery, потому что это фоновый процесс.

Функциональность сельдерея:

• создание контейнераcelery успешно
• celery запускает рабочий gunicorn ([2024-03-13 12:27:32 +0000] [10] [INFO] Starting gunicorn 20.1.0).
• В логах нет ошибок, связанных с Celery.

Отсутствует логотип сельдерея:

Сама программа Celery не имеет графического интерфейса пользователя (GUI), в котором отображается логотип. Он работает в фоновом режиме, выполняя задачи асинхронно.

Журналы фоновых задач:

В журналах видно, что успешное выполнение фоновых задач вероятно, поскольку возвращается result.ready.

Журналы отладки:

Я вижу, что вы включили режим отладки в вашем docker-compose.yaml файле и рекомендую проверить журналы celery docker-compose logs celery --tail=1000 -f, чтобы проверить отсутствующие журналы.

Пожалуйста, сообщите мне, что вы ожидаете увидеть, например, логотип в формате svg или журналы ASCII, если я что-то упускаю.

Я заметил, что на некоторых машинах я могу запустить celery, только если я укажу также имя рабочего, планировщика, очереди и параллелизма, попробуйте запустить celery следующим образом:

celery worker -A backend --loglevel=info --concurrency=4 -n backend@localhost -Q backend -E -Ofair -B -s backend_schedule

также не забудьте сконфигурировать celery на старте следующим образом:

django.setup()
broker = CELERY_BROKER_URL
backend = CELERY_RESULT_BACKEND
app = Celery('backend')
app.config_from_object('django.conf:settings', namespace='CELERY')
app.conf.broker_url = broker
app.conf.result_backend = backend
app.autodiscover_tasks()

возможно CELERY_BROKER_URL && CELERY_RESULT_BACKEND нужно установить из переменных env, в моем случае я установил их в файле настроек.

Также может быть полезно прикрепить изображение по id и попробовать запустить сельдерей из cli.

Насколько я понимаю, вы хотите, чтобы сельдерей начал работать над

docker-compose build 

Для начала нужно понять, как docker работает с django и celery: поэтому ваши сервисы docker

1. Backend
2. celery

оба должны находиться на одном общем томе.

теперь, когда вы копируете данные django в контейнер docker если вы видите в docker файл для backend, он копируется в app dir команда в docker -

COPY . /app

и в файле docker compose у вас есть volume conf как

 - .:/django

так что все ваши диры должны быть упорядочены

сначала измените ваш файл docker следующим образом

    FROM python:3.9-alpine

RUN apk update && apk add postgresql-dev gcc python3-dev musl-dev

RUN pip install --upgrade pip

COPY ./requirements.txt .
RUN pip install -r requirements.txt

COPY . /app
WORKDIR /app

COPY ./entrypoint.sh .

CMD ["/app/entrypoint.sh"]

затем измените файл docker-compose на

version: '3.7'

services:
  # Redis
  redis:
    image: redis:alpine
    container_name: redis
    ports:
      - '6379:6379'

  backend:
    volumes:
      - ./backend:/app
      - static:/static
    env_file:
      - .env
    build:
      context: ./backend
    ports:
      - '8000:8000'
    container_name: backend_container

  frontend:
    build:
      context: ./frontend
    volumes:
      - frontend:/app/build
    container_name: frontend_container
  nginx:
    build:
      context: ./nginx
    volumes:
      - static:/static
      - frontend:/var/www/frontend
    ports:
      - '80:80'
    depends_on:
      - redis
      - backend
      - frontend

  # celery
  celery:
    restart: always
    build: ./backend
    command: celery -A backend worker -l info
    volumes:
      - ./backend:/app
    container_name: celery
    depends_on:
      - redis
      - backend

volumes:
  static:
  frontend:

Итак, все, что я изменил, это последнюю строку файла докера на CMD["command"] чтобы она не выполнялась при сборке и настроил тома в docker-compose, чтобы они указывали на тот же том, что и build

ваш ожидаемый результат

Я предлагаю вам посмотреть эти 2 видео

1)https://www.youtube.com/watch?v=mScd-Pc_pX0&ab_channel=LondonAppDeveloper

2)https://www.youtube.com/watch?v=EfWa6KH8nVI&ab_channel=PriyanshuGupta