Adobe анонсировала тестирование генеративной модели Firefly Video в Premiere Pro

То, что в бете Фотошопа есть довольно неплохо работающие фичи на базе ИИ — это давно известно, и сейчас они выходят из беты. Но вот то, что в Premiere Pro появилась бета Firefly, позволяющий расширить кадр или прям сгенерировать видео — это, конечно, круто. Буду пробовать.

Adobe представила обновления ИИ-модели Firefly. — Новая функция Generative Extend позволяет расширять отснятый материал на 2 секунды, корректируя мелкие ошибки. Доступно в тестовом режиме в Premiere Pro. — Text-to-Video и Image-to-Video появились в веб-версии Firefly и доступны более широкому кругу пользователей.

Adobe добавил в видеоредактор GenAI. Новую генеративную модель Firefly Video добавят в Premiere. Фича сможет генерировать короткие ролики на четыре секунды или расширить уже готовый ролик на две. Модель превращает фотографии и текст в имитацию съёмки или анимацию. Пользователи смогут настраивать параметры, например, ракурс камеры и разрешение кадра. Бета-версия модели появилась ещё в 2023 году, а в апреле 2024 выпустили VideoGigaGAN, которая должна была улучшать качество видео в восемь раз.

Компания Adobe официально представила новую генеративную нейросеть Firefly Video Model, которая предназначена для работы с видео и стала частью приложения Premiere Pro. С помощью этого инструмента пользователи смогут дополнять отснятый материал, а также создавать ролики на основе статичных изображений и текстовых подсказок. Функция Generative Extend на базе упомянутой нейросети в рамках бета-тестирования становится доступной пользователям Premiere Pro. Она позволит продлить видео на несколько секунд в начале, конце или каком-то другом отрезке ролика. Это может оказаться полезным, если в процессе монтажа нужно скорректировать мелкие недочёты, такие как смещение взгляда человека в кадре или лишние движения.

Adobe обычно представляет множество крупных продуктов и обновлений на своем ежегодном мероприятии MAX, и конференция по дизайну этого года не является исключением. — Компания анонсировала свою первую генеративную видеомодель, которая уже доступна в Premiere Pro, опередив на рынке такие конкурирующие предложения, как Sora от OpenAI и Veo от Google; — Project Concept также включает встроенную функцию генеративного ИИ «ремикс», которая смешивает аспекты из нескольких референсных изображений. Пока она недоступна, но Adobe говорит, что мы узнаем больше «в ближайшем будущем»; — В мобильных приложениях Lightroom теперь также есть функция «Генеративное удаление» , которая была представлена ​​в редакторе для настольных компьютеров в мае. Она упрощает удаление раздражающих объектов с изображений на ходу; — версия 4 модели Firefly позволит пользователям выделять области сгенерированного изображения для корректировки без необходимости создания его заново с нуля. В посте примеры генераций в Premiere Pro. #re_news Подписаться Предложить пост

На конференции Adobe MAX представили свежие ИИ-инструменты. В бете выпустили видеогенератор Firefly Video Model, он уже интегрирован в Premiere Pro и доступен в веб-приложении Firefly. Пока есть несколько инструментов: Generative Extend — позволяет продлить начало или конец видеоклипа. Это может показаться несущественным, но для профессионалов это крутая возможность исправить мелкие ошибки без необходимости пересъемки. Generative Extend работает с разрешением до 1080p при 24 кадрах в секунду и даже может продлевать звуковые эффекты и фоновый шум до 10 секунд. Два других инструмента доступны в веб-приложении Firefly. Text-to-Video — генерирует видео на основе текстового описания. Пользователи могут выбирать различные стили, включая реалистичное видео, 3D-анимацию и даже стоп-моушн. Image-to-Video идет еще дальше, позволяя использовать изображение в качестве референса вместе с текстовым запросом. Это открывает возможности для создания b-roll или визуализации пересъемок. Но есть и ограничения: максимальная длина генерируемых клипов — 5 секунд, а качество ограничено 720p при 24 кадрах в секунду. Adobe уверяет, что их инструменты "коммерчески безопасны", так как обучены на их лицензионном контенте. Тут вы найдете больше инфы про Adobe Max, а Firefly Video Model можно потестить тут из РФ заходим с VPN .

О проверках "дроповодов" и криптообменников и не только - на tokengram.ru

ИИ для генерации видео теперь есть и в Premiere Pro Adobe выпустила Firefly Video Model для генерации видео по тексту или из изображений. Пока что модель только тестируется и доступна в публичной бета-версии Premiere Pro. Такой ИИ умеет преобразовывать текст и/или изображение в видеоконтент, работать с 2D- и 3D-анимациями, а также имитировать «реальную съёмку». rozetked.me/news/35663

Adobe представила ИИ-инструменты для работы с видео Компания выпустила в бете свою модель Firefly Video Model, которая уже интегрирована в Premiere Pro и доступна в веб-приложении Firefly. Пока есть несколько инструментов. Первый, Generative Extend, запускается в бета-версии Premiere Pro. Он позволяет продлить начало или конец видеоклипа смотрите второй ролик . Это может показаться несущественным, но для профессионалов это означает возможность исправить мелкие ошибки без необходимости пересъемки. Generative Extend работает с разрешением до 1080p при 24 кадрах в секунду и даже может продлевать звуковые эффекты и фоновый шум до 10 секунд! Два других инструмента доступны в веб-приложении Firefly. Text-to-Video позволяет генерировать видео на основе текстового описания. Пользователи могут выбирать различные стили, включая реалистичное видео, 3D-анимацию и даже стоп-моушн. Image-to-Video идет еще дальше, позволяя использовать изображение в качестве референса вместе с текстовым запросом. Это открывает возможности для создания b-roll или визуализации пересъемок. Однако у этих инструментов есть ограничения. Максимальная длина генерируемых клипов - 5 секунд, а качество ограничено 720p при 24 кадрах в секунду. Adobe уверяет, что их инструменты "коммерчески безопасны", так как обучены на их лицензионном контенте. P.S. Первому ролику несколько месяцев, но он отлично показывает чего в итоге хотят добиться в Adobe.

Adobe представила ИИ-инструменты для работы с видео Компания выпустила в бете свою модель Firefly Video Model, которая уже интегрирована в Premiere Pro и доступна в веб-приложении Firefly. Пока есть несколько инструментов. Первый, Generative Extend, запускается в бета-версии Premiere Pro. Он позволяет продлить начало или конец видеоклипа смотрите второй ролик . Это может показаться несущественным, но для профессионалов это означает возможность исправить мелкие ошибки без необходимости пересъемки. Generative Extend работает с разрешением до 1080p при 24 кадрах в секунду и даже может продлевать звуковые эффекты и фоновый шум до 10 секунд! Два других инструмента доступны в веб-приложении Firefly. Text-to-Video позволяет генерировать видео на основе текстового описания. Пользователи могут выбирать различные стили, включая реалистичное видео, 3D-анимацию и даже стоп-моушн. Image-to-Video идет еще дальше, позволяя использовать изображение в качестве референса вместе с текстовым запросом. Это открывает возможности для создания b-roll или визуализации пересъемок. Однако у этих инструментов есть ограничения. Максимальная длина генерируемых клипов - 5 секунд, а качество ограничено 720p при 24 кадрах в секунду. Adobe уверяет, что их инструменты "коммерчески безопасны", так как обучены на их лицензионном контенте. P.S. Первому ролику несколько месяцев, но он отлично показывает чего в итоге хотят добиться в Adobe.

Видеонейросеть Adobe Firefly вышла в раннем доступе Генеративные способности нейросети пока особо не впечатляют: Firefly превращает текстовые запросы в ролики с разрешением 720p и частотой 24 к/с, продолжительностью не более пяти секунд. В текущем состоянии сгодится разве что собрать раскадровку или подобрать плейсхолдер для будущего клипа. Зато Firefly здорово редактирует уже существующее видео: можно убрать или заменить объект в кадре, сгенерировать звуковую дорожку или продлить футаж на две секунды. Нейросеть интегрирована в Premiere Pro и получила отдельное веб-приложение. Попробовать Firefly можно уже сейчас, записавшись на закрытое бета-тестирование. Innovation Station Новости IT