Meta анонсирует Movie Gen — новый инструмент для генерации видео и аудио

Meta представляет Movie Gen — ИИ для генерации видео со звуком Movie Gen может создавать реалистичные видео- и аудиоклипы в ответ на запросы пользователя. Компания утверждает, что она может конкурировать с инструментами ведущих стартапов в области создания медиа, таких как OpenAI и ElevenLabs. Movie Gen также может генерировать фоновую музыку и звуковые эффекты, синхронизированные с содержанием видео, а также использовать этот инструмент для редактирования существующих видео. Видеоролики, созданные Movie Gen, могут длиться до 16 секунд, а аудио — до 45 секунд ============== Meta признана в РФ экстремистской

Meta запрещена в России представила набор моделей Movie Gen для генерации видео со звуком. ИИ также позволяет менять детали в уже сгенерированных роликах. Пока Movie Gen используется только в исследовательских целях, отметили в компании vc.ru/ai/1543820

Meta представила Movie Gen — фулхаус генератор видео по тексту По ощущениям, новые text-2-video модели нынче выходят каждый день Meta наконец-то представила свой новый набор моделей под названием Movie Gen, который позволяет генерировать короткие видео со звуком всего за 16 секунд. И это не просто графика — в играх ИИ может создавать «персонализированные» ролики на основе ваших фотографий и текстовых запросов. Вот что умеет новый инструмент: - Генерация видео длиной до 16 секунд с частотой 16 кадров в секунду. Для 10-секундных видео частота может достигать 24 кадров в секунду. - Возможность редактировать уже сгенерированные ролики, включая замену фона и изменение цветов объектов. То есть, если захотите, можно вставить себя на пляж вместо офиса. - Создание фоновой аудиодорожки, которая синхронизируется с видео. Например, вы можете добавить звуки джунглей или шум квадроцикла, создавая атмосферу. Пока Movie Gen находится на стадии разработки и доступ к нему будет ограничен, компания надеется получить обратную связь от «режиссёров» и «авторов». Звучит многообещающе, но пока нет возможности озвучивать видео человеческой речью. Попробовать можно здесь: тык!

Забирай эксклюзивное предложение для пользователей Tek.fm от Газпромбанка 🔥Нажми на меня

Meta презентовали свой видеогенератор суперского качества. На релизе сразу заготовили кучу крутых фишек, которые покрали у конкурентов: — Можно загонять видео и редактировать его стиль и визуал; — Генерация видео с собственным лицом! — Видео создается сразу со звуковыми эффектами.

Meta только что анонсировала Movie Gen – семейство фундаментальных медиа-моделей Что может Movie Gen: генрировать видео до 1080p с различным соотношением сторон генерировать звук в формате video-to-audio и музыку редактировать видео на основе промптов промптом может быть текст или изображение По архитектуре трансформер, конечно. Самая большая модель имеет 30B параметров и обучена на контексте в 73K видеотокенов это примерно 6 секунд 16fps . В статье есть детали про данные, устройство латентного пространства, оптимизацию архитектуры и лоссов.

Meta представила основанный на искусственном интеллекте генератор видео Movie Gen, который позволяет по простому текстовому запросу создавать или редактировать видеоролики — компания становится всё более серьёзным конкурентом OpenAI и Google в области ИИ. На основе текстовых запросов Movie Gen создаёт новые видео длиной до 16 секунд. Эти же запросы могут использоваться для генерации звука к существующим видеозаписям, для редактирования готовых роликов или для создания видео с участием реального человека на основе предложенной фотографии. Пока пользоваться Movie Gen могут лишь некоторые сотрудники компании, а также её партнёры, в том числе некоторые режиссёры; а в будущем году Meta намеревается добавить поддержку нейросети в свои популярные приложения.