Скачать или смотреть Масштабная перезагрузка инженерии данных — Джо Рейс (Small Data SF 2025)

Джо Рейс выступил с программной речью на конференции Small Data 2025, рассказав о том, как ИИ коренным образом изменил подход к проектированию данных. Он утверждает, что мы все вернулись к старту, пытаясь понять, что нас ждет дальше в мире, где старые споры (Кимбалл против Инмана, Lakehouse против Warehouse) больше не имеют значения.

Джо противопоставляет «корпоративную среду» (данные как центр затрат, управляемые панелями мониторинга, игра в обороне) «среду продуктов» (данные как драйвер дохода, игра в нападении), показывая, как выпуск ChatGPT создал момент перезагрузки, который выровнял игровое поле во всем мире. Он представляет «постмодернистский стек данных»: гибридные детерминированные/вероятностные системы с непрерывными петлями обратной связи, где агенты заменяют панели мониторинга, а действия — аналитические выводы.

Ключевые темы:
Почему 99% компаний по-прежнему работают в корпоративной среде
Переход от хранилищ данных к хранилищам знаний
Агентные планировщики запросов обрабатывают в 20-50 раз больше запросов к базам данных
Потоковая обработка как основной метод (а не пакетная)
Мультимодальные данные за пределами таблиц
Столкновение библиотечных наук и инженерии данных

➡️ Подписывайтесь на нас
LinkedIn:   / motherduck  
X/Twitter:   / motherduck  
Блог: https://motherduck.com/blog/