Скачать или смотреть Airflow: Взаимодействие с БД (Airflow Connections, Postgres) #8

Это восьмое видео из серии про Airflow, посвященное устройству работы с базами данных на примере Postgress.

Сегодня узнаем как:
• Развернуть БД в Docker для экспериментов
• Настроить Airflow Connection
• Реализовать DAG с SQLExecuteQueryOperator под капотом
P.S. Теперь ваши данные будут течь как горная река — предсказуемо и без сбоев!

Подписывайтесь на телеграмм: Telegram https://t.me/marat_notes

Материалы по видео (руководство по установке и настройке для подключения к БД Postgres, и реализованный dag):
https://github.com/MaratNotes/marat_n...

Видео из цикла - Как работают данные: практические кейсы.

Если Вы когда-нибудь задумывались или хотите узнать как данные перемещаются внутри реальных продуктов, как строятся пайплайны, отслеживается их состояние и обеспечивается надёжная передача информации между системами - то этот цикл видео для Вас!

Этот курс — гид в мир современных data-технологий. Я не буду просто теоретизировать, в результате мы вместе построим настоящую инфраструктуру обработки данных с нуля.

00:00 Приветственное слово
00:28 Airflow Connections
04:36 Установка и настройка взаимодействия с PostgreSql
14:34 Реализация dag'а для взаимодействия с БД
32:34 Заключительное слово

#DataEngineering #ApacheAirflow #ETL #TechTutorial #DataInfrastructure #HandsOnTutorial #YoutubeEducation