exponenta event banner

Данные предварительной обработки

Очистка, сглаживание, группирование данных

Для обеспечения точного, эффективного или содержательного анализа данных могут потребоваться методы предварительной обработки. Очистка данных относится к методам поиска, удаления и замены неверных или отсутствующих данных. Выявление локальных экстремальных и резких изменений может помочь выявить значительные тенденции данных. Сглаживание и сдерживание - это процессы удаления шумов и полиномиальных трендов из данных, в то время как масштабирование изменяет границы данных. Методы группирования и связывания определяют признаки данных по группам.

Задачи интерактивного редактора

Очистить отсутствующие данныеПоиск, заполнение или удаление отсутствующих данных в интерактивном редакторе
Очистить данные об отклоненияхПоиск, заполнение или удаление отклонений в редакторе Live Editor
Найти точки измененияПоиск резких изменений в данных в интерактивном редакторе
Найти местные экстремумыПоиск локальных максимумов и минимумов в интерактивном редакторе
Сглаживание данныхСглаживание шумных данных в редакторе Live Editor
Удалить тенденцииУдаление полиномиального тренда из данных в редакторе Live Editor

Функции

развернуть все

ismissingНайти отсутствующие значения
rmmissingУдалить отсутствующие записи
fillmissingЗаполнить отсутствующие значения
missingСоздать отсутствующие значения
standardizeMissingВставка стандартных отсутствующих значений
isoutlierПоиск отклонений в данных
filloutliersОбнаружение и замена отклонений в данных
rmoutliersОбнаружение и удаление отклонений в данных
movmadСкользящее среднее абсолютное отклонение
ischangeПоиск резких изменений в данных
islocalminНайти локальные минимумы
islocalmaxНайти локальные максимумы
smoothdataПлавные шумные данные
movmeanСкользящее среднее
movmedianПодвижная медиана
detrendУдаление полиномиального тренда
normalizeНормализовать данные
rescaleМасштабировать диапазон элементов массива
discretizeГруппировать данные по ячейкам или категориям
groupcountsКоличество элементов группы
groupfilterФильтровать по группам
groupsummaryГрупповые сводные расчеты
grouptransformПреобразование по группам
histcountsКоличество ячеек гистограммы
histcounts2Двухмерные счетчики Bivariate histogram bin
findgroupsПоиск групп и возврат номеров групп
splitapplyРазбить данные на группы и применить функцию
rowfunПрименение функции к строкам таблицы или расписания
varfunПрименение функции к переменным таблицы или расписания
accumarrayНакапливать векторные элементы

Темы

Очистить грязные и отсутствующие данные в таблицах

В этом примере показано, как находить, очищать и удалять строки таблицы с отсутствующими данными.

Сдерживание данных

Удаление линейных трендов из данных.

Группирование переменных для разделения данных

Переменные группировки можно использовать для классификации переменных данных.

Разделение данных на группы и расчет статистики

В этом примере показано, как группировать данные и применять функции статистики к каждой группе.

Разбить переменные данных таблицы и применить функции

В этом примере показано, как группировать переменные данных и применять функции к каждой группе.

Характерные примеры