parallelize

Класс: matlab.compiler.mlspark.SparkContext
Пакет: matlab.compiler.mlspark

Создайте RDD из набора локальных значений MATLAB

Синтаксис

rdd = parallelize(sc,cellArray)
rdd = parallelize(sc,cellArray,numSlices)

Описание

rdd = parallelize(sc,cellArray) создает RDD из набора локальных MATLAB® значения сгруппированы как массив ячеек.

rdd = parallelize(sc,cellArray,numSlices) создает RDD с количеством разделов, заданным numSlices.

Входные параметры

расширить все

Используемый SparkContext, заданный как SparkContext объект.

Набор значений, заданный как массив ячеек MATLAB.

Типы данных: cell

Количество создаваемых разделов, заданное как скаляр.

Типы данных: double

Выходные аргументы

расширить все

A выхода RDD, созданный из набора значений и возвращенный как RDD объект.

Примеры

расширить все

Создайте RDD из локальных значений MATLAB.

%% Connect to Spark
sparkProp = containers.Map({'spark.executor.cores'}, {'1'});
conf = matlab.compiler.mlspark.SparkConf('AppName','myApp', ...
                        'Master','local[1]','SparkProperties',sparkProp);
sc = matlab.compiler.mlspark.SparkContext(conf);

%% parallelize
x = sc.parallelize({1, 2, 3, 4, 5});
y = x.count()
Введенный в R2016b