MOTIA outpaint видео (добавление контента за границами области просмотра) с сохранением межкадровой согласованности

️ MOTIA — outpaint видео (добавление контента за границами области просмотра) с сохранением межкадровой согласованности. MOTIA — двухэтапный конвейер на основе генеративной диффузии. Первая фаза (input-specific adaptation) выполняет outpaint первого кадра видео и определяет паттерн закономерности для дорисовки в последующих кадрах. Вторая фаза (pattern-aware outpainting) делает непосредственно outpaint всего видео на основе знаний первой фазы, добавляя шум и контролирует пространственную геометрию, сохраняя возможную плавность и бесшовность. Судя по бенчмаркам разработчика, MOTIA - один из лучших методов на данный момент. Запустить: conda env create -f git clone bash GitHub Модели на HF Страничка MOTIA Arxiv