Топ нейросетей для улучшения качества звука

Технология экономит время и предоставляет новые возможности, но в некоторых случаях действует непредсказуемо. Например, ИИ иногда путается в жанрах, из-за чего вместо рок-композиции может написать эмбиент. Или алгоритм неправильно распознает дорожки и заглушит партию ударных, а не вокал. Поэтому часть задач лучше решать с помощью специальных программ для нарезки музыки.

Обзор нейросетей, улучшающих качество звука

Мы подобрали несколько онлайн-сервисов и приложений для обработки звука нейросетью. Этим ПО можно пользоваться бесплатно. Для работы вам не понадобится мощный компьютер или музыкальное оборудование. В большинстве случаев ИИ определяет и устанавливает параметры автоматически, а вычисления выполняются на удаленных серверах.

Auphonic

Платформа: онлайн
Язык: английский

Сервис предлагает несколько инструментов для обработки аудиофайлов и звуковых дорожек видео. Первый — диктофон. С его помощью можно записать голос или инструментальную партию, а затем обработать различными алгоритмами. Они автоматически удаляют вздохи, слова-паразиты и долгие паузы, выравнивают громкость, переводят речь в текст.

Эти и другие функции доступны в том числе для загружаемых файлов. Таким образом можно убрать вокал из песни или, наоборот, сделать акапеллу. Предусмотрен отдельный режим для подкастов и аудиокниг. В нем можно обозначить главы, отредактировать метаданные (информацию об авторе, издателе, альбоме, времени записи и прочее).

Beathoven.ai

Платформа: онлайн
Язык: английский

Онлайн-сервис генерирует музыку по текстовым описаниям пользователя. За раз создает три варианта композиции. В них можно вносить изменения: заглушать выбранные партии, менять темп и жанр. С учетом этих правок ИИ генерирует новые треки. Дополнительно можно накладывать композиции на видеоряд, а также регулировать громкость при помощи кривой.

Треки, которые созданы в бесплатной версии, предназначены для некоммерческого использования. Подписка (от $6 в месяц) убирает это ограничение. Также она открывает скачивание Stem — пакетов, в которых, помимо сведенной композиции, находятся звуковые файлы с каждой партией. Эти дорожки можно импортировать в десктопный аудиоредактор и обработать самостоятельно.

Audio Noise Reducer

Платформа: онлайн, Windows
Язык: английский

Сервис с нейросетью, улучшающей качество звука. ИИ делает речь более четкой, удаляет шумы, задувание ветра в микрофон, избыточную реверберацию (эхо) и звуки щелчков мыши и клавиатуры. Пользователю достаточно загрузить исходный файл, выбрать режим, а затем — скачать готовую аудиозапись. Ручных настроек, например, чтобы поменять интенсивность применяемых алгоритмов, здесь не предусмотрено. Поддерживается обработка записей длительностью до одного часа.

Алгоритмы сервиса также встроены в UniConverter — десктопное приложение от того же разработчика. Оно предназначено для конвертации медиафайлов, но содержит и несколько функций по их обработке, включая подавление посторонних звуков и шума.

Cleanvoice AI

Платформа: онлайн
Язык: английский

Онлайн-сервис пригодится для обработки голосовых записей, например, аудиокниг, интервью и подкастов. ИИ автоматически убирает слова-паразиты, посторонние звуки и паузы длиннее пяти секунд. Алгоритм может настроить громкость речи каждого из участников диалога, чтобы никто из них не звучал слишком громко или тихо на фоне других собеседников. Сервис поддерживает четыре аудиоформата: WAV, MP3, M4A и FLAC. Можно вручную выбирать режимы, которые вы хотите применить к исходному материалу.

Обработка тарифицируется поминутно. 30 минут предоставляется бесплатно при регистрации. Баланс пополняется подпиской (от €10 в месяц, за которые пользователь получает 10 часов) или разовыми платежами — при покупке пакетов (от €10 за 5 часов). Также разработчики предлагают специальные тарифы пользователям, которым нужно обрабатывать более 1000 часов аудиозаписей ежемесячно. В этом случае условия и стоимость обсуждаются индивидуально.

Podcastle

Платформа: онлайн
Язык: английский

Сервис позиционируется как инструмент для авторов подкастов. С его помощью можно записать аудио и видео, отредактировать полученный материал (например, удалить ненужные фрагменты) и преобразовать его в текст. На сайте есть коллекция музыки и аудиоэффектов. Этот контент можно накладывать поверх основной дорожки, например, в качестве саундтрека. Также ИИ умеет озвучивать тексты, но русский язык пока не распознает.

Специальный раздел отведен под расписание предстоящих интервью, записей или публикаций, которое можно синхронизировать с Google Календарем. Поддерживается многопользовательский доступ. Благодаря этому коллеги и другие авторы смогут работать с аудиоматериалами на одном аккаунте. Вам не придется пересылать контент через файлообменники, мессенджеры или электронную почту.

Voicemod

Платформа: Windows, Android
Язык: русский и другие

Приложение позволяет в реальном времени обработать звук нейросетью. Оно захватывает сигнал с микрофона и преобразовывает по выбранным пресетам. В результате речь начинает звучать как голос робота, инопланетянина, фантастического персонажа или одной из знаменитостей. Всего в коллекции свыше 150 шаблонов, но большая их часть открывается в Pro-версии (от 110 российских рублей в месяц или 3600 — единоразово). В ней же можно создавать собственные голоса.

Программа рассчитана на блоггеров, стримеров и геймеров. Она поможет отыграть роль определенного персонажа или подшутить над собеседниками в голосовом чате. Дополнительно можно назначать аудиоэффекты (гонг, сирена, затвор камеры и другие) на горячие клавиши. Всего в библиотеке более 150 тысяч таких звуков. Однако многие из них нужно покупать во внутреннем магазине. Чтобы сэкономить, можно импортировать в Voicemod собственные аудиофайлы.

Fadr

Платформа: онлайн
Язык: английский

Эта нейросеть для работы со звуком умеет генерировать ремиксы, а также извлекать вокальные и инструментальные партии в отдельные аудиофайлы. Сначала ИИ анализирует композицию, разделяет ее на несколько дорожек, определяет темп и тональность. Далее можно заглушать выбранные дорожки, менять их громкость и панораму (перемещать в стереопространстве между левым и правым каналом).

Ремиксы создаются в жанре, который указывает пользователь. Сейчас доступно 11 стилей: рок, ритм-н-блюз и различные виды электронной музыки. Готовые проекты хранятся на сайте в личном кабинете, но их можно скачивать как MP3- или WAV-файлы.

Функционал сервиса можно встроить в DAW (цифровую музыкальную студию — многодорожечный редактор с секвенсором) при помощи специального плагина. Также разработчики предлагают собственный виртуальный синтезатор, который генерирует звуки по коротким описаниям. Пока инструмент находится в статусе бета-версии и может функционировать нестабильно. Плагин и синтезатор предоставляются при действующей подписке (от $10 в месяц).

Заключение

Мы рассмотрели программы и сервисы, в которых есть нейросети для обработки звука. Этот софт можно использовать как для шуток и розыгрышей — Voicemod, так и для серьезной повседневной работы — Podcastle. ИИ научился разделять композиции на партии, подавлять шум и даже создавать ремиксы. Однако пока технология далека от совершенства. У пользователей не всегда есть возможность как-то повлиять на результат, поскольку обычно все действия выполняются в автоматическом режиме. Впрочем, можно попытаться вручную исправить ошибки, которые допускает ИИ, в обычном ПО. Для этого пригодятся специальные звуковые редакторы для работы со звуком.