Как создать рабочих сельдерея на отдельных машинах?

Я новичок в celery.I знаю, как установить и запустить один сервер, но мне нужно распределить задачу на несколько машин. Мой проект использует сельдерей для назначения пользовательских запросов, передаваемых в веб-фрейм, на разные машины, а затем возвращает результат. Я прочитал документацию, но там не упоминается, как настроить несколько машин. Что мне не хватает?

2 Solutions collect form web for “Как создать рабочих сельдерея на отдельных машинах?”

Я понимаю, что ваше приложение будет посылать запросы в систему очередей (например, rabbitMQ), а затем вы можете запускать любое количество рабочих на разных машинах (с доступом к тому же коду, что и приложение, которое отправило задание). Они будут выбирать задачи из очереди сообщений, а затем работать с ними. Как только они будут завершены, они обновят базу данных надгробных камней.

Результатом этого является то, что вам не нужно делать ничего особенного, чтобы начинать несколько сотрудников. Просто запустите их на отдельных одинаковых (одинаковых исходных дерева) машинах.

Сервер, у которого есть очередь сообщений, не обязательно должен быть таким же, как тот, который есть у рабочих, и не должен быть таким же, как машины, которые отправляют задания. Вам просто нужно поместить местоположение очереди сообщений в файл celeryconfig.py и все рабочие на всех машинах могут celeryconfig.py задания из очереди для выполнения задач.

Способ, которым я его развернул, выглядит так:

  1. клонировать ваш проект django на экземпляре heroku (это запустит интерфейс)
  2. добавьте RabitMQ в качестве дополнения и настройте его
  3. клонировать проект django в другой экземпляр heroku (назовите его как рабочий), где вы будете запускать задачи сельдерея
Interesting Posts

Ошибка программирования Django 1.8: отношение auth_user не существует при запуске теста

Почему выполнение запланированных задач с сельдереем предпочтительнее crontab?

Есть ли способ очистить html, который производит jinja2?

Разбор XML с пространством имен в Python через 'ElementTree'

Как заставить редактор PyDev выборочно игнорировать ошибки?

Разбор S-выражений в Python

ошибка плохой zip-файла в пометке POS в NLTK в python

Ранг Панды по нескольким столбцам

Получить текст из текстового поля в Flask

Взаимодействие с загружаемым модулем в файле __init__.py python

Проблемы с чтением CSV-файла с запятыми и символами в пандах

График таймплоттинга Matplotlib из матрицы numpy

Как получить максимальное использование памяти в программе с помощью psutil в Python

Вычисление разностей в группах кадра данных

Selenium Python: наведите курсор мыши на круговую диаграмму с небольшими участками, зависающими на неправильных разделах

Python - лучший язык программирования в мире.