Adobe анонсировала тестирование генеративной модели Firefly Video в Premiere Pro

То, что в бете Фотошопа есть довольно неплохо работающие фичи на базе ИИ — это давно известно, и сейчас они выходят из беты. Но вот то, что в Premiere Pro появилась бета Firefly, позволяющий расширить кадр или прям сгенерировать видео — это, конечно, круто. Буду пробовать.

Adobe представила обновления ИИ-модели Firefly. — Новая функция Generative Extend позволяет расширять отснятый материал на 2 секунды, корректируя мелкие ошибки. Доступно в тестовом режиме в Premiere Pro. — Text-to-Video и Image-to-Video появились в веб-версии Firefly и доступны более широкому кругу пользователей.

ИИ для генерации видео теперь есть и в Premiere Pro Adobe выпустила Firefly Video Model для генерации видео по тексту или из изображений. Пока что модель только тестируется и доступна в публичной бета-версии Premiere Pro. Такой ИИ умеет преобразовывать текст и/или изображение в видеоконтент, работать с 2D- и 3D-анимациями, а также имитировать «реальную съёмку». rozetked.me/news/35663

Компания Adobe официально представила новую генеративную нейросеть Firefly Video Model, которая предназначена для работы с видео и стала частью приложения Premiere Pro. С помощью этого инструмента пользователи смогут дополнять отснятый материал, а также создавать ролики на основе статичных изображений и текстовых подсказок. Функция Generative Extend на базе упомянутой нейросети в рамках бета-тестирования становится доступной пользователям Premiere Pro. Она позволит продлить видео на несколько секунд в начале, конце или каком-то другом отрезке ролика. Это может оказаться полезным, если в процессе монтажа нужно скорректировать мелкие недочёты, такие как смещение взгляда человека в кадре или лишние движения.

🔥 Акция для пользователей Tek.fm *Нажми тут

Adobe добавил в видеоредактор GenAI. Новую генеративную модель Firefly Video добавят в Premiere. Фича сможет генерировать короткие ролики на четыре секунды или расширить уже готовый ролик на две. Модель превращает фотографии и текст в имитацию съёмки или анимацию. Пользователи смогут настраивать параметры, например, ракурс камеры и разрешение кадра. Бета-версия модели появилась ещё в 2023 году, а в апреле 2024 выпустили VideoGigaGAN, которая должна была улучшать качество видео в восемь раз.

Adobe представила ИИ-инструменты для работы с видео Компания выпустила в бете свою модель Firefly Video Model, которая уже интегрирована в Premiere Pro и доступна в веб-приложении Firefly. Пока есть несколько инструментов. Первый, Generative Extend, запускается в бета-версии Premiere Pro. Он позволяет продлить начало или конец видеоклипа смотрите второй ролик . Это может показаться несущественным, но для профессионалов это означает возможность исправить мелкие ошибки без необходимости пересъемки. Generative Extend работает с разрешением до 1080p при 24 кадрах в секунду и даже может продлевать звуковые эффекты и фоновый шум до 10 секунд! Два других инструмента доступны в веб-приложении Firefly. Text-to-Video позволяет генерировать видео на основе текстового описания. Пользователи могут выбирать различные стили, включая реалистичное видео, 3D-анимацию и даже стоп-моушн. Image-to-Video идет еще дальше, позволяя использовать изображение в качестве референса вместе с текстовым запросом. Это открывает возможности для создания b-roll или визуализации пересъемок. Однако у этих инструментов есть ограничения. Максимальная длина генерируемых клипов - 5 секунд, а качество ограничено 720p при 24 кадрах в секунду. Adobe уверяет, что их инструменты "коммерчески безопасны", так как обучены на их лицензионном контенте. P.S. Первому ролику несколько месяцев, но он отлично показывает чего в итоге хотят добиться в Adobe.