Adobe продолжает разрабатывать генеративные ИИ-сервисы для создателей контента. Компания представила генератор звука в бета-версии, работающий на основе фирменного движка Firefly. Новый сервис позволяет генерировать звуковые эффекты по текстовому описанию. Также поддерживается создание звуков с помощью голоса (можно просто сымитировать нужный эффект голосом и сервис распознает и подберет требуемый звук) — для более точного согласования сауддизайна с визуальным рядом.
С развитием ИИ-систем в фото и видеоиндустрии произошли серьезные изменения. Графика, дизайн, эффекты и многое другое стали гораздо доступнее. Не обошел прогресс стороной и саунддизайн.
Впрочем, некоторые сервисы уже предлагают эту функцию. Однако идея «озвучивания» желаемых эффектов, чтобы ИИ точно знал продолжительность и суть действия в видео, это ноу-хау компании Adobe. Такие голосовые заметки позволяют получить гораздо больше контроля над финальным результатом. Например: произносим «вжух» и ИИ-генератор создает такой звук.
Инструментарий Adobe Firefly Sound Generator выглядит как стандартный браузерный редактор. Он позволяет загружать видео длиной до 30 секунд, а затем генерировать для него звуковые эффекты, ползунком выравнивая их по нужным временным интервалам.
Звуковой генератор Adobe Firefly объединяет возможность текстовых и голосовых подсказок — это должно помочь создать звуковой эффект, который точно соответствует описанию, при этом совпадая с синхронизацией и динамикой материала. Инструмент также позволяет пользователям создавать несколько аудиодорожек и накладывать различные звуковые эффекты для более проработанного саунддизайна, пишет компания Adobe.
Adobe постарались сделать интерфейс нового звукового генератора интуитивно понятным. Переходим на «домашнюю» страницу Firefly, находим модуль Audio и выбераем «Голосовые эффекты в звук (бета)».
Далее требуется сделать следующее:
- Загрузите медиафайл, для которого вы хотите создать саунддизайн. Это может быть аудио или видеофайл.
- Переместите ползунок воспроизведения на временной шкале в тот самый момент, когда должен начаться первый звуковой эффект.
- Теперь перейдите в раздел Voice performance слева. Здесь можно либо загрузить аудиофайл с вашего устройства, либо записать его прямо в интерфейсе. Если вы нажмете на последнюю функцию, появится трехсекундный обратный отсчет. После его завершения начнется запись.
- Вы увидите, что ваши голосовые заметки были добавлены на вкладке подсказок выше. Введите текстовое описание там.
- После нажатия кнопки «Сгенерировать» ИИ предложит четыре варианта звукового эффекта. Выберите один, и программа вставит его в позицию. Если вы хотите поменять его, сначала щелкните по самому клипу на временной шкале, а затем выберите другую сгенерированную версию.
Если вам нужно наложить несколько эффектов, нажмите «Добавить звуковую дорожку» и повторите процесс с самого начала. Сами разработчики звукового генератора Adobe Firefly также поделились некоторыми советами по написанию подсказок, которые приблизят вас к желаемым результатам. Например, важно предоставить четкое, краткое и прямое описание нужного вам звука.
Другой совет — использовать прилагательные и глаголы. Первые должны описывать качества SFX, а вторые — передавать действие или поведение звука. Такой подход позволяет более точно контролировать характеристики каждого звукового эффекта.
Ранее Photar.ru сообщал о приложении Adobe для съемки на iPhone. Adobe выпустила экспериментальное приложение Project Indigo для камер смартфонов со множеством возможностей вычислительной фотографии. Софт представлен на специализированном сайте для разработчиков, однако примеры снимков, которые демонстрирует приложение, действительно впечатляют. Основная суть Project Indigo — задействовать вычислительные мощности продвинутых мобильных процессоров для значительного улучшения качества фотографий. Приложение бесплатно и уже доступно в AppStore.
