Audio Toolbox™ предоставляет инструменты для обработки звука, анализа речи и акустических измерений. Он включает в себя алгоритмы для обработки звуковых сигналов, таких как выравнивание и растягивание времени, оценка метрик акустических сигналов, таких как громкость и резкость, и извлечение звуковых признаков, таких как MFCC и тон. Она также предоставляет передовые модели машинного обучения, включая i-векторы, и предварительно обученные сети глубокого обучения, включая VGGish и CREPE. Приложения Toolbox поддерживают тестирование алгоритмов в реальном времени, измерение импульсной характеристики и маркировку сигналов. Панель инструментов обеспечивает потоковые интерфейсы для ASIO™, CoreAudio и других звуковых плат; устройства MIDI; и инструменты для генерации и размещения подключаемых модулей VST и Audio Unit.
С помощью Audio Toolbox можно импортировать, маркировать и дополнять наборы аудиоданных, а также извлекать функции для обучения моделей машинного обучения и глубокого обучения. Предоставленные предварительно подготовленные модели могут быть применены к аудиозаписям для семантического анализа высокого уровня.
Вы можете создавать прототипы алгоритмов обработки звука в режиме реального времени или выполнять пользовательские акустические измерения путем потоковой передачи звука с низким временем задержки на звуковые карты и с них. Вы можете проверить свой алгоритм, превратив его в аудиоплагин для запуска во внешних серверных приложениях, таких как Digital Audio Workstations. Хостинг плагинов позволяет использовать внешние аудиоплагины в качестве обычных объектов MATLAB ®.
Считывание звука из файла и запись звука в динамики.
Создайте стенд аудиотестирования и примените обработку в реальном времени.
Создайте модель с помощью шаблонов и блоков Simulink ® для обработки звука.
Обучение, проверка и тестирование простой долговременной памяти (LSTM) для классификации звуков.
Используйте transfer learning для переподготовки YAMNet, предварительно обученной сверточной нейронной сети (CNN), для классификации нового набора аудиосигналов.
Создайте простой аудиоплагин в MATLAB, а затем используйте его для создания подключаемого модуля VST.
Узнайте о роли рабочих станций цифрового звука (DAWs), аудиоплагинов и контроллеров цифрового интерфейса музыкального инструмента (MIDI) в разработке алгоритмов обработки звука.
Изучите общие инструменты и рабочие процессы для применения глубокого обучения к аудиоприложениям.
Что такое Audio Toolbox?
Проектирование и тестирование систем обработки звука с помощью Audio Toolbox.
Введение в глубокое обучение для аудио- и речевых приложений
Создавайте или вводите наборы данных, извлекайте функции и разрабатывайте средства анализа звука и речи с помощью средств статистики и машинного обучения, средств глубокого обучения или других средств машинного обучения.
