Открытая LTX-2 генерирует 4K-видео с синхронным аудио — первая полностью open-source модель для создания видео и звука…

Открытая LTX-2 генерирует 4K-видео с синхронным аудио — первая полностью open-source модель для создания видео и звука одновременно Компания Lightricks выпустила веса LTX-2 — мультимодальной модели для синхронной генерации видео и аудио. Что умеет новинка: 🕤 Генерирует нативное 4K-видео при 50 FPS с диалогами, музыкой и звуковыми эффектами длиной до 20 секунд; 🕤 Сохраняет идентичность персонажей на протяжении всего ролика без потери качества; 🕤 Точно синхронизирует движения губ с речью для реалистичных диалогов; 🕤 Поддерживает управление через ключевые кадры и полноценную 3D-логику камеры; 🕤 Принимает на вход текст, изображения, видео, аудио и карты глубины; 🕤 Доступны веса модели, инференс-пайплайны, код для обучения и полная документация; По результатам слепых тестов на AI Arena, LTX-2 — лидер среди открытых решений для видеогенерации. 🔗 Попробовать: https://huggingface.co/Lightricks/LTX-2