
Apache Airflow
Apache Airflow — це безкоштовна платформа з відкритим кодом для створення, планування та моніторингу робочих процесів з даними за допомогою коду на Python та візуальних панелей керування.
Що таке Apache Airflow
Apache Airflow — це інструмент, який допомагає створювати та керувати автоматизованими робочими процесами для обробки даних. Уявіть його як розумного координатора, який запускає ваші завдання у правильному порядку, у потрібний час і вирішує проблеми, коли вони виникають.
Ви визначаєте свої робочі процеси за допомогою коду на Python, що означає, що можете використовувати всі знайомі вам інструменти. Кожен робочий процес називається DAG, який показує, як ваші завдання пов’язані та залежать одне від одного. Airflow має візуальну веб-панель, де можна бачити виконання робочих процесів, перевіряти журнали та перезапускати невдалі завдання.
Платформа працює з хмарними сервісами, такими як AWS, Google Cloud та Azure, а також сотнями інших інструментів через готові підключення. Ви можете запускати її на власних серверах або використовувати керовані сервіси, як-от Astronomer.
Функції Apache Airflow
Створення робочих процесів на основі Python
Візуальна веб-панель з моніторингом
Автоматичне планування завдань та повторні спроби
Розумне управління залежностями
Масштабування від ноутбука до хмари
Понад 1500 готових інтеграцій
Працює з AWS, Google Cloud, Azure
Інструменти командного рядка для автоматизації
Вбудоване ведення журналів та оповіщення
Відкритий код і самостійне розгортання
Активна підтримка спільноти
Доступні функції корпоративного рівня
Ціноутворення Apache Airflow
Open Source
Free
- Необмежена кількість робочих процесів і завдань
- Повний доступ до всіх функцій
- Створення робочих процесів на базі Python
- Візуальна веб-панель управління
- Планування та моніторинг завдань
- 1,500+ інтеграцій
- Самостійне розміщення на вашій інфраструктурі
- Підтримка спільноти через Slack та форуми
- Повний доступ до вихідного коду
- Без обмежень або обмежень на використання
Managed Services
Custom
- Повністю керована інфраструктура
- Автоматичні оновлення та виправлення
- Підтримка для підприємств доступна
- Налаштування високої доступності
- Моніторинг та оповіщення
- Функції безпеки та відповідності
- Масштабовані обчислювальні ресурси
- Кілька варіантів розгортання
- Приклади: Astronomer Astro, AWS MWAA, Google Cloud Composer, Azure Managed Airflow
- Ціни варіюються залежно від постачальника та використання
Випадки використання Apache Airflow
Репозиторій Apache Airflow
Переглянути на Github| Зірки | 46,365 |
| Форки | 17,515 |
| Вік репозиторію | 11 років |
| Останній коміт | 1 годину тому |
Часті запитання про Apache Airflow
Подивіться, що користувачі кажуть про Apache Airflow
0 Огляди
Ще немає оглядів
Будьте першим, хто напише огляд Apache Airflow










