С момента релиза обновлённой версии Firefly в апреле, платформа генеративных ИИ-сервисов от Adobe получает регулярные крупные обновления практически каждый месяц.
В своем релизе разработчики представили ряд новых возможностей, ориентированных на создание видео.
Одним из главных нововведений стала упрощённая работа со звуковыми эффектами. Многие современные генеративные алгоритмы создают видео без звукового сопровождения. Чтобы устранить этот недостаток, Adobe внедрила функцию, позволяющую пользователю сначала текстом описать нужный звуковой эффект, а затем произнести его вслух. Это не попытка имитировать звук голосом - такая функция помогает системе точнее определить желаемую громкость и продолжительность аудиофайла.
Во время презентации сотрудник Adobe показал, как функция работает: он озвучил звук расстёгивания молнии, произнеся «ззззттт», после чего ИИ-система воспроизвела подходящий эффект с нужной громкостью. Хотя результат не всегда получается идеально точным, функция отлично подходит для черновой работы, что и было её основной задачей.
Ещё одной полезной новинкой стала функция Composition Reference. Она позволяет загружать изображения или видео, чтобы задать направление генерации. Благодаря инструменту Video Presets можно выбирать стиль создаваемого видео - доступны, например, аниме, чёрно-белый стиль или визуализация с векторной графикой. А Keyframe Cropping позволяет задать начальный и финальный кадры, выбрать соотношение сторон, после чего Firefly сгенерирует ролик в нужном формате.
Кроме того, в июне платформа Adobe получила поддержку ИИ-моделей сторонних разработчиков, а в июле этот список был расширен, открывая ещё больше возможностей для пользователей.
Источник
Уникальность