Sonos запускает режим улучшения речи с ИИ, разработанный для людей с потерей слуха

Эксклюзивно: Sonos представила свой первый режим звука с использованием искусственного интеллекта для улучшения речи, разработанный с ведущей благотворительной организацией по проблемам слуха, и звучит он великолепно.
Sonos выпустила новую версию инструментов для улучшения речи для звуковой панели Sonos Arc Ultra, которую мы считаем одной из лучших на рынке. Вы всё так же найдете эти инструменты на экране "Сейчас играет" в приложении Sonos, но вместо всего лишь пары вариантов теперь у вас будет четыре новых режима (Низкий, Средний, Высокий и Максимальный), все они используют первое в компании применение инструмента обработки звука на основе ИИ. Они должны быть доступны пользователям с 12 мая.
Эти режимы были разработаны в рамках годового партнерства с Королевским национальным институтом глухоты (RNID) — ведущей благотворительной организацией в Великобритании, помогающей людям с потерей слуха. Я поговорил с Sonos и RNID, чтобы узнать подробности разработки, но вы можете продолжить чтение здесь, чтобы найти больше деталей.
Обновление запускается сегодня на звуковых панелях Sonos Arc Ultra, но не будет доступно на других звуковых панелях Sonos, потому что оно требует более высокой мощности обработки, которой не хватает устаревшим моделям.
Элемент ИИ используется для анализа звука, проходящего через звуковую панель в реальном времени, и выделения "речных" элементов, чтобы сделать их более заметными в общей мешанине звука, не нарушая при этом остальные звуковые элементы. Я слышал это в действии во время демонстрации в центре разработки продукции Sonos в Великобритании, и это действительно впечатляет.
Если вы когда-либо пользовались инструментами улучшения речи, вы, вероятно, знакомы с тем, что динамический диапазон звука, особенно бас, внезапно резко уменьшается в обмен на более явные речевые элементы. Но в новом режиме Sonos этого не происходит – мощный бас, общая звуковая палитра и более погружающие элементы Dolby Atmos сохраняются значительно лучше. Это объясняется двумя причинами: во-первых, речь улучшается отдельно от других частей, а во-вторых, это динамическая система, которая активируется только при обнаружении речи, вероятно, затыкаемой фоновым шумом.
Она не активируется, если диалог происходит на тихом фоне или если в сцене нет диалога. И это система, которая работает по степеням — она применяет больше обработки в самых загруженных сценах и меньше, когда аудио не так хаотично.
При двух нижних режимах диалог выделяется более четко без особого ущерба для остального звукового сопровождения, на основе моей демонстрации. В режиме Высокий фон все еще сохранялся очень хорошо, но речь стала звучать немного более обработанной, а в режиме Максимум я начал слышать, как фон немного терял свои качества, а речь приобретала чуть больше искусственности — но речь была невероятно хорошо выделена, и этот режим предназначен только для людей с трудностями слуха.
Я отметил, что режим был разработан в сотрудничестве с RNID, что включало в себя консультации Sonos с экспертами по звуку в RNID, а также привлечение людей с различными типами и степенями потери слуха для тестирования режимов на разных этапах разработки и предоставления обратной связи.
Я долго беседовал с инженерами Sonos по аудио и ИИ, которые разработали новые режимы, а также с RNID, но главный вывод заключается в том, что сотрудничество привело к тому, что Sonos сосредоточила больше внимания на сохранении погружающих звуковых эффектов и добавила четыре уровня улучшения вместо изначально запланированных трех.
Несмотря на участие RNID, новый режим не предназначен исключительно для людей с нарушениями слуха. Он по-прежнему называется «Улучшение речи», как и теперь, и не скрыт как средство по помощи, звук улучшается для всех, а «все» теперь лучше включает людей с легкой и умеренной потерей слуха. Низкий и Средний режимы также могут просто функционировать для тех из нас, кто нуждается в небольшом дополнительном ясности в шумных сценах.
Это не первый случай применения ИИ для отделения речи, который я видел – я испытывал это на телевизорах Samsung и в веселом шоу на телевизорах Philips, где это использовалось для отключения комментариев во время спортивных событий, сохраняя при этом звуки толпы.
Но любопытно, что это первое использование обработки звука на основе ИИ от Sonos, и четырехлетний процесс разработки, включая год доработки с RNID, показывает, что Sonos подошла к вопросу осмысленно, что не всегда видно в других приложениях обработки звука с использованием ИИ. Просто жаль, что эта функция эксклюзивна для Sonos Arc Ultra на данный момент – хотя я уверен, что новые версии Sonos Ray и Sonos Beam Gen 2 обязательно появятся с тем же обновленным чипом, чтобы поддержать эту функцию.