Audio Toolbox

Проектирование и анализ систем речевой, акустической и аудио обработки

Audio Toolbox™ предоставляет инструменты для обработки звука, анализа речи и акустического измерения. Он включает алгоритмы обработки аудиосигналов, таких как эквализация и растяжение во времени, оценки метрик акустического сигнала, таких как громкость и резкость, и извлечения аудио функций, таких как MFCC и тангаж. Он также предоставляет расширенные модели машинного обучения, включая i-векторы, и предварительно обученные нейронные сети для глубокого обучения, включая VGGish и CREPE. Приложения Toolbox поддерживают проверку живых алгоритмов, измерение импульсной характеристики и маркировку сигналов. Тулбокс обеспечивает потоковые интерфейсы к ASIO™, CoreAudio и другим звуковым картам; Устройства MIDI; и инструменты для генерации и размещения плагинов VST и Audio Units.

С помощью Audio Toolbox вы можете импортировать, маркировать и дополнять наборы аудио данных, а также извлекать функции для обучения моделей машинного обучения и глубокого обучения. Предварительно обученные модели могут быть применены к аудиозаписям для семантического анализа высокого уровня.

Можно прототипировать алгоритмы обработки аудио в режиме реального времени или запустить пользовательские акустические измерения путем потоковой передачи звука с низкой задержкой на и с звуковых карт. Можно подтвердить алгоритм, превратив его в аудиоплагин для запуска в внешних хост-приложениях, таких как Digital Audio Workstations. Plugin hosting позволяет использовать внешние аудиоплагины как обычные MATLAB® объекты.

Запуск

Изучение основ Audio Toolbox

Audio I/O и генерация сигналов

Запись и воспроизведение аудио с устройств, чтение и запись аудио файлов, генерация осциллограмм

Проект алгоритма обработки аудио

Инструменты обработки аудио, проект и модуляризация алгоритмов, потоковая обработка

Машинное обучение и глубокое обучение для аудио

Управление набором данных, маркировка и увеличение; сегментация и редукция данных для аудио, речи и акустических приложений

Измерения и пространственное аудио

Акустика, психоакустика, импульсная характеристика помещения, HRTF, SPL-измерение

Симуляция, настройка и визуализация

Прототипирование и настройка в реальном времени, MIDI, аудио испытательного стенда

Цифровой интерфейс музыкального инструмента (MIDI)

Создавайте, отправляйте и получайте сообщения MIDI

Создание и хостинг аудиоплагинов

Генерация VST и AU, проверка, валидация и хостинг

Генерация кода

Создавайте автономные приложения для рабочие компьютеры, мобильных устройств и целевых процессоров