Скачать или смотреть Генерация авторегрессионных изображений без векторного квантования

В этом видео я объясняю, как работает подход MAR и как можно генерировать новые изображения, используя модели авторегрессии, но моделируя их с помощью диффузионных потерь в непрерывном пространстве вместо обычно используемой кросс-энтропии.

Ссылка на статью: https://arxiv.org/abs/2406.11838
Объяснение доктора Сонга о диффузионных и основанных на оценках генеративных моделях:    • Diffusion and Score-Based Generative Models  

Содержание:
00:00 Вступление
00:23 Авторегрессионные модели в обработке естественного языка
04:19 Переход к изображениям
07:39 Авторегрессия в непрерывном пространстве
15:00 Объединение авторегрессионных и маскированных генеративных моделей
20:49 Итоговый рисунок
21:35 Заключение