Программный импорт больших данных

Импорт больших данных из реляционной базы данных в MATLAB® рабочая область с помощью командной строки

Можно использовать DatabaseDatastore объект для импорта больших данных в рабочее пространство MATLAB. Чтобы создать этот объект, используйте databaseDatastore функция. После импорта данных в рабочее пространство MATLAB можно использовать длинные массивы для их анализа. Кроме того, метод программирования MapReduce предоставляет вам большую гибкость в анализе больших данных.

Чтобы разделить SQL-запрос на несколько запросов SQL-страниц и импортировать большие данные в фрагментах, используйте splitsqlquery функция. Вы можете получить доступ к большим данным с помощью функций Database Toolbox™ или параллельного пула (требует Parallel Computing Toolbox™).

Функции

расширить все

databaseDatastoreDatastore для данных в базе данных
hasdataОпределите, есть ли данные в DatabaseDatastore доступно для чтения
previewВозвращает подмножество данных из DatabaseDatastore
readЧтение данных в DatabaseDatastore
readallЧтение всех данных в DatabaseDatastore
resetСброс DatabaseDatastore в начальное состояние
createConnectionForPoolИнициализируйте параллельный пул с помощью подключения к базе данных
splitsqlqueryРазделение запроса SQL с помощью пейджинга

Темы

Работа с большими наборами данных

Импорт и экспорт больших наборов данных, которые хранятся в базе данных.

Импорт больших данных с использованием объекта DatabaseDatastore

Создайте DatabaseDatastore объект для доступа к наборам данных, хранящихся в реляционной базе данных.

Анализ больших данных в базе данных с помощью длинных массивов

Найдите минимальное значение в большом наборе данных с помощью длинная таблица.

Анализируйте большие данные в базе данных с помощью MapReduce

Напишите функции mapper и reducer для анализа больших данных с помощью DatabaseDatastore объект.