Мультимодальные контрастивные модели

Класс моделей, использующих цели контрастивного обучения для максимизации сходства между положительными парами модальностей при одновременном минимизации сходства отрицательных пар. Эти модели превосходно справляются с задачами выравнивания и поиска благодаря своей способности изучать семантически богатые представления.

← Назад