Создан заказ №9724689
19 апреля 2023
Design and implementation of high performance scalable distributed scheduler for DAG execution
Как заказчик описал требования к работе:
На питоне
Разработка и внедрение высокопроизводительного масштабируемого распределенного планировщика для выполнения DAG
за основу берем Apache Airflow
для него нужно написать новый шедулер, который ускорит работу с большим количеством дагов, на основе модели акторов (так же нужно обосновать почему
выбрана именно модель акторов и в чем ее преимузества)
результатом работы должно быть сравнение продолжительности работы алгоритма со старой реализацией шедулера и новой. скорее всего можно поработать так же над работой с базой данных
работа с акторами может быть реализована с помощью фреймворка pykka
_________________________
мы используем apach airflow поскольку это удобный продукт дл управлени пайплайнами. однако при большом количестве задач и дагов планировщик начинает работать медленнее(это необходимо проверить и отобразить в результате работы как сравнение с новой реализацией)
нужно написать новый(именно новый, а не улучшение старого, тк в теме работы указана задача написание своего) планировщик задач (в scheduler_job.py реализован текущий планировщик), который будет работать внутри airflow.
желательно сделать fork репозитори, чтобы была возможность забрать нам коммиты, чтобы можно было показать код
результатом работы должен быть код и текст диплома
нужно страниц 20-2
подробнее
Заказчик
заплатил
заплатил
3000 ₽
Заказчик оплатил в рассрочку
Гарантия сервиса
Автор24
Автор24
20 дней
Заказчик принял работу без использования гарантии
26 апреля 2023
Заказ завершен, заказчик получил финальный файл с работой
5
Design and implementation of high performance scalable distributed scheduler for DAG execution.docx
2023-04-29 14:34
Последний отзыв студента о бирже Автор24
Общая оценка
5
Положительно
Огромное спасибо!Все очень быстро, четко и качественно! Работа выполнена на очень высоком уровне!!!
Хочешь такую же работу?
300 ₽
