aggregate

Класс: matlab.compiler.mlspark.RDD
Пакет: matlab.compiler.mlspark

Агрегируйте элементы каждого раздела и впоследствии результаты для всех разделов в одно значение

Синтаксис

result = aggregate(obj,zeroValue,seqOp,combOp)

Описание

result = aggregate(obj,zeroValue,seqOp,combOp) агрегирует элементы в одно значение с помощью заданных функций объединения, заданных seqOp и combOp, и нейтральное «нулевое значение», заданное zeroValue.

Входные параметры

расширить все

RDD входа, заданный как RDD объект.

Нейтральное «нулевое значение», заданное как массив ячеек с числами.

Типы данных: cell

Функция для агрегирования значений каждой клавиши, заданная как указатель на функцию.

Типы данных: function_handle

Функция для агрегирования результатов seqOp, заданный как указатель на функцию.

Типы данных: function_handle

Выходные аргументы

расширить все

RDD, содержащий агрегированные элементы, возвращенный как RDD объект.

Примеры

расширить все

%% Connect to Spark
sparkProp = containers.Map({'spark.executor.cores'}, {'1'});
conf = matlab.compiler.mlspark.SparkConf('AppName','myApp', ...
                        'Master','local[1]','SparkProperties',sparkProp);
sc = matlab.compiler.mlspark.SparkContext(conf);

%% Aggregate
seqOp = @(x,y)({x{1} + y, x{2} + 1});
combOp = @(x,y)({x{1} + y{1}, x{2} + y{2}});
x = sc.parallelize({1, 2, 3, 4});
y = x.aggregate({0, 0}, seqOp, combOp) % {10,4}

См. также

|

Введенный в R2016b