exponenta event banner

Панель звуковых инструментов

Проектирование и анализ систем обработки речи, звука и звука

Audio Toolbox™ предоставляет инструменты для обработки звука, анализа речи и акустических измерений. Он включает в себя алгоритмы для обработки звуковых сигналов, таких как выравнивание и растягивание времени, оценка метрик акустических сигналов, таких как громкость и резкость, и извлечение звуковых признаков, таких как MFCC и тон. Она также предоставляет передовые модели машинного обучения, включая i-векторы, и предварительно обученные сети глубокого обучения, включая VGGish и CREPE. Приложения Toolbox поддерживают тестирование алгоритмов в реальном времени, измерение импульсной характеристики и маркировку сигналов. Панель инструментов обеспечивает потоковые интерфейсы для ASIO™, CoreAudio и других звуковых плат; устройства MIDI; и инструменты для генерации и размещения подключаемых модулей VST и Audio Unit.

С помощью Audio Toolbox можно импортировать, маркировать и дополнять наборы аудиоданных, а также извлекать функции для обучения моделей машинного обучения и глубокого обучения. Предоставленные предварительно подготовленные модели могут быть применены к аудиозаписям для семантического анализа высокого уровня.

Вы можете создавать прототипы алгоритмов обработки звука в режиме реального времени или выполнять пользовательские акустические измерения путем потоковой передачи звука с низким временем задержки на звуковые карты и с них. Вы можете проверить свой алгоритм, превратив его в аудиоплагин для запуска во внешних серверных приложениях, таких как Digital Audio Workstations. Хостинг плагинов позволяет использовать внешние аудиоплагины в качестве обычных объектов MATLAB ®.

Начало работы

Основные сведения об инструменте Audio Toolbox

Генерация аудиосигналов ввода-вывода и сигналов

Запись и воспроизведение звука с устройств, чтение и запись аудиофайлов, генерация сигналов

Разработка алгоритма обработки звука

Средства обработки звука, разработка алгоритмов и модуляризация, потоковая обработка

Машинное обучение и глубокое обучение для аудио

Управление наборами данных, маркировка и увеличение; сегментация и извлечение характеристик для звуковых, речевых и акустических приложений

Измерения и пространственное аудио

Акустика, психоакустика, импульсная реакция помещения, учет HRTF, SPL

Моделирование, настройка и визуализация

Прототипирование и настройка в реальном времени, MIDI, аудиотестирование

Цифровой интерфейс музыкальных инструментов (MIDI)

Создание, отправка и получение MIDI-сообщений

Создание и размещение аудиоплагина

Генерация, тестирование, проверка и хостинг VST и AU

Создание и развертывание кода

Создание автономных приложений для настольных компьютеров, мобильных устройств и встроенных целей