exponenta event banner

Файл конфигурации для создания развертываемого архива с помощью mcc Команда

При создании развертываемого архива с помощью mcc необходимо создать текстовый файл, содержащий следующую информацию:

Тип параметраОписание

mw.ds.out.type

Тип вывода данных из задания mapreduction Hadoop ®

Возможны следующие варианты:

  • keyvalue

  • tabulartext

mw.mapper

Имя функции карты MATLAB ®

mw.reducer

Наименование функции уменьшения MATLAB

mw.ds.in.format

Имя MAT-файла, содержащего datastore объект, представляющий формат обрабатываемых данных.

В большинстве случаев вы начнете с работы с небольшим набором данных-образцов, находящимся на локальном компьютере, который представляет фактический набор данных в кластере. Этот образец набора данных имеет ту же структуру и переменные, что и фактический набор данных в кластере. Создавая объект хранилища данных для набора данных, находящегося на локальном компьютере, вы создаете снимок этой структуры. Имея доступ к этому объекту хранилища данных, задание Hadoop, выполняемое в кластере, будет знать, как получить доступ к фактическому набору данных, находящемуся в HDFS™, и обработать его.

mw.ds.in.type

Тип ввода данных в задание восстановления карты Hadoop

Возможны следующие варианты:

  • keyvalue

  • tabulartext

mw.ds.in.fullfile

Значение по умолчанию: false

Пример файла конфигурации

config.txt

mw.ds.out.type = keyvalue
mw.mapper = maxArrivalDelayMapper
mw.reducer = maxArrivalDelayReducer
mw.ds.in.format = infoAboutDataset.mat
mw.ds.in.type = tabulartext

Связанные темы