Prefect

Prefect — це система управління робочими процесами на базі Python, яка перетворює звичайні функції на готові до виробництва конвеєри даних. Ви пишете свій код на звичайній мові Python, додаєте кілька простих маркерів (названих декораторами), а Prefect автоматично обробляє планування, моніторинг і відновлення після помилок.

Інструмент працює двома способами: ви можете запускати його на власних серверах (версія з відкритим кодом) або використовувати їх хмарний сервіс. Обидва варіанти надають зручну панель керування, щоб бачити, що виконується, що не вдалося і де виникли проблеми. Prefect автоматично повторно запускає невдалі завдання, кешує результати для економії часу і надсилає сповіщення при виникненні проблем.

Що робить Prefect особливим — це його гнучкість. Він працює з вашим існуючим кодом, не змушуючи вас перебудовувати все, що робить його легшим для впровадження, ніж багато альтернатив.

• Автоматизація робочих процесів на основі Python без спеціальних мов

• Автоматичне повторне виконання завдань та обробка помилок

• Панель моніторингу та налагодження в режимі реального часу

• Гнучке планування з використанням cron-виразів та тригерів подій

• Відкритий код з можливістю хостингу в хмарі

• Інтеграція з AWS, Google Cloud, Azure та іншими

• Контроль версій та управління розгортанням

• Командна співпраця з робочими просторами та правами доступу

• Доступ до API для користувацьких інтеграцій

• Активна підтримка спільноти