Программирование Основы Apache Airflow - zerotomastery (2025)

[Gatsby]

Основы Apache Airflow
Fundamentals of Apache Airflow
zerotomastery




Этот практический курс начинается с основ и шаг за шагом подводит вас к построению реальных сценариев оркестрации - от повторных попыток выполнения задач до интеграции со Spark и загрузки внешних данных.
Переместить данные из точки A в точку B - лишь малая часть задачи. Важно, чтобы данные доставлялись точно, надёжно и автоматически - и здесь на помощь приходит Apache Airflow.
Вы научитесь превращать хаотичные, вручную настроенные пайплайны в чётко организованные рабочие процессы. Начнём с понимания архитектуры Airflow и его ключевых компонентов, а затем освоим более продвинутые приёмы: настройка повторных попыток, обработка сбоев, использование сенсоров, работа с Apache Spark и автоматическая загрузка данных из внешних источников в data lake.
Курс подойдёт как начинающим дата-инженерам, так и тем, кто хочет улучшить свои навыки оркестрации. Вы получите реальные практические инструменты для создания масштабируемых и надёжных систем обработки данных.

Подробнее:

Скачать:

Для просмотра скрытого содержимого вы должны войти или зарегистрироваться.