Искусственный интеллект и сжатие звука без потери качества

Искусственный интеллект и сжатие звука без потери качества

Аудиокодек на базе искусственного интеллекта обещает 10-кратное сжатие по сравнению с MP3.

На прошлой неделе группа ученых объявила о новом алгоритме сжатия звука, разработанным с участием искусственного интеллекта. EnCodec сжимает аудио в 10 раз лучше, чем культовый MP3. Утверждается, что сжатие происходит без слышимых потерь качества звука. Этот метод может значительно улучшить качество звука речи при низкоскоростных соединениях, например, при телефонных звонках в районах с нестабильным обслуживанием.

Meta*, а именно в ней работают исследователи, описывает свой метод как систему из трех частей, обученную сжимать звук до желаемого целевого размера.

  • Во-первых, кодировщик преобразует несжатые данные в представление «скрытого пространства» с более низкой частотой кадров.
  • Затем «квантизатор» сжимает представление до целевого размера, сохраняя при этом наиболее важную информацию, которая позже будет использоваться для восстановления исходного сигнала. (Этот сжатый сигнал передается по сети или сохраняется на диск.)
  • Наконец, декодер преобразует сжатые данные обратно в звук в режиме реального времени, используя нейронную сеть на одном процессоре.
  • Использование дискриминаторов (классификаторов) оказывается ключом к созданию метода максимально возможного сжатия звука без потери ключевых элементов сигнала, которые делают его отличительным и узнаваемым.

    «Ключом к сжатию с потерями является идентификация изменений, которые не будут восприняты людьми [человеческим слухом], поскольку идеальная реконструкция невозможна при низких скоростях передачи данных. Для этого мы используем дискриминаторы (классификаторы) для улучшения воспринимаемого качества сгенерированных образцов. Их задача состоит в том, чтобы различать реальные и реконструированные звуковые отрезки. Модель сжатия пытается добиться восстановления звуковых отрезков до изначального состояния».

    Стоит отметить, что использование нейронной сети для сжатия и распаковки звука далеко не ново, особенно для сжатия разговорной речи. Однако, исследователи Meta* утверждают, что они являются первыми, кто применил технологию к стереозвуку с частотой дискретизации 48 кГц – под эту категорию попадают практически все музыкальные CD и большинство музыки в интернете.

    На данный момент новая технология находится на стадии исследования, но есть надежда, что в будущем она позволит использовать сети с малой пропускной способностью для передачи высококачественного звука.

    *признана экстремистской организацией и запрещена в РФ

    Источник

    Добавить комментарий

    Ваш адрес email не будет опубликован. Обязательные поля помечены *

    • Как агентствам сохранять эффективность ссылочного продвижения при фиксированных бюджетах

      На рынке ссылочного продвижения есть одна особенность, о которой редко говорят вслух. Почти все участники процесса прекрасно понимают, что бюджеты не растут бесконечно. Более того, в последние годы многие агентства столкнулись с обратной ситуацией: требования клиентов становятся выше, конкуренция усиливается, задач становится больше, а бюджеты в лучшем случае остаются на прежнем уровне. Именно поэтому сегодня…

    • Компании начали уходить от массовых PR-кампаний к работе с узкими аудиториями

      Привычные массовые пресс-релизы, которые годами рассылались сотням редакций одновременно, начинают стремительно терять эффективность. Крупные компании всё чаще отказываются от «информационного шума» и переходят к точечной работе с конкретными аудиториями, журналистами и профессиональными сообществами. По словам экспертов, классические одинаковые публикации для десятков площадок стали приносить значительно меньший эффект. На фоне перенасыщения информационного пространства компании начали делать…

    • Хоккейное сообщество Беларуси возложило цветы к Монументу Победы в Минске

      В Минске представители белорусского хоккея приняли участие в памятных мероприятиях, приуроченных ко Дню Победы. Цветы к Монументу Победы на Площади Победы возложили участники хоккейной команды Президента, молодежной сборной Беларуси, а также игроки и представители ХК «Динамо‑Минск». В хоккейном сообществе отметили, что участие в таких мероприятиях стало ежегодной традицией. Спортсмены и представители команд почтили память погибших…