Meta бросает вызов OpenAI – компания создала новую ИИ-модель Movie Gen, способную генерировать видео со звуком. Ее представил лично Марк Цукерберг.
Movie Gen способна создавать реалистичные видео- и аудиоклипы с помощью подсказок пользователя. По утверждению Цукерберга, ИИ-модель может соперничать с инструментами ведущих стартапов по созданию медиа, таких как OpenAI и ElevenLabs.
Примеры работ Movie Gen, предоставленные Meta, демонстрируют видео с плаванием и серфингом животных, а также ролики с использованием реальных фотографий людей, изображающие их действия, например, рисование на холсте.
Movie Gen также может генерировать фоновую музыку и звуковые эффекты, синхронизированные с содержанием видео, а также использовать инструмент для редактирования существующих роликов.
В одном из таких роликов Meta вставила помпоны в руки человека, бегущего в одиночку по пустыне, а в другом - изменила парковку, где человек катался на скейтборде, превратив ее из сухой земли в покрытую брызгами лужу.
Видеоролики, созданные Movie Gen, могут длиться до 16 секунд, а аудио – до 45 секунд. Компания поделилась данными слепых тестов, показавших, что модель демонстрирует хорошие результаты по сравнению с предложениями таких стартапов, как Runway, OpenAI, ElevenLabs и Kling.
