Audio Toolbox™ предоставляет инструменты для обработки звука, анализа речи и акустических измерений. Он включает в себя алгоритмы для обработки звуковых сигналов, таких как выравнивание и растягивание времени, оценка метрик акустических сигналов, таких как громкость и резкость, и извлечение звуковых признаков, таких как MFCC и тон. Она также предоставляет передовые модели машинного обучения, включая i-векторы, и предварительно обученные сети глубокого обучения, включая VGGish и CREPE. Приложения Toolbox поддерживают тестирование алгоритмов в реальном времени, измерение импульсной характеристики и маркировку сигналов. Панель инструментов обеспечивает потоковые интерфейсы для ASIO™, CoreAudio и других звуковых плат; устройства MIDI; и инструменты для генерации и размещения подключаемых модулей VST и Audio Unit.
С помощью Audio Toolbox можно импортировать, маркировать и дополнять наборы аудиоданных, а также извлекать функции для обучения моделей машинного обучения и глубокого обучения. Предоставленные предварительно подготовленные модели могут быть применены к аудиозаписям для семантического анализа высокого уровня.
Вы можете создавать прототипы алгоритмов обработки звука в режиме реального времени или выполнять пользовательские акустические измерения путем потоковой передачи звука с низким временем задержки на звуковые карты и с них. Вы можете проверить свой алгоритм, превратив его в аудиоплагин для запуска во внешних серверных приложениях, таких как Digital Audio Workstations. Хостинг плагинов позволяет использовать внешние аудиоплагины в качестве обычных объектов MATLAB ®.
Основные сведения об инструменте Audio Toolbox
Запись и воспроизведение звука с устройств, чтение и запись аудиофайлов, генерация сигналов
Средства обработки звука, разработка алгоритмов и модуляризация, потоковая обработка
Управление наборами данных, маркировка и увеличение; сегментация и извлечение характеристик для звуковых, речевых и акустических приложений
Акустика, психоакустика, импульсная реакция помещения, учет HRTF, SPL
Прототипирование и настройка в реальном времени, MIDI, аудиотестирование
Создание, отправка и получение MIDI-сообщений
Генерация, тестирование, проверка и хостинг VST и AU
Создание автономных приложений для настольных компьютеров, мобильных устройств и встроенных целей