Глоссарий ИИ
Полный словарь искусственного интеллекта
Модель временной диффузии
Архитектура нейронной сети, которая применяет процесс диффузии на временной оси для генерации согласованных последовательностей видеокадров.
Пространственная диффузия
Процесс зашумления и очистки от шума, применяемый к пространственным размерам (высота и ширина) каждого отдельного видеокадра.
3D видеотензор
Многомерная структура данных, представляющая видео с тремя измерениями: время, высота и ширина, используемая как вход для моделей диффузии.
Диффузия видео в латентном пространстве
Подход, который выполняет процесс диффузии в сжатом латентном пространстве, а не напрямую в пространстве пикселей, для снижения вычислительных затрат.
Токенизация видео
Процесс преобразования необработанных видеоданных в дискретные представления (токены) в латентном пространстве для более эффективной обработки.
Моделирование динамики движения
Изучение паттернов движения и временных преобразований для генерации реалистичных и физически правдоподобных анимаций.
Видеодиффузия с очисткой от шума
Итеративный процесс очистки от шума, применяемый последовательно к видеокадрам для восстановления чистого видео из начального шума.
Межкадровое внимание
Механизм, позволяющий каждому кадру извлекать информацию из других кадров для поддержания временной согласованности и пространственных отношений.
Конвейер генерации видео
Последовательность вычислительных этапов, включая кодирование, латентную диффузию, деноизинг и декодирование для создания видео.
Латентное пространство видео
Сжатое векторное пространство, где видео представлены в виде латентных кодов, что облегчает манипуляцию и эффективную генерацию.
Диффузионная выборка видео
Итеративный процесс выборки во времени и пространстве для генерации видеокадров из изученных распределений вероятностей.
Условный синтез видео
Генерация видео, управляемая множеством условных входов, таких как позы, маски или траектории движения.
Предсказание видеокадров
Задача прогнозирования будущих кадров видео на основе предыдущих кадров с использованием диффузионных моделей для генерации.