reduceByKeyLocally

Класс: matlab.compiler.mlspark.RDD
Пакет: matlab.compiler.mlspark

Объедините значения для каждого ключа с помощью ассоциативного, уменьшают функцию, но сразу возвращают результаты к драйверу

Синтаксис

result = reduceByKeyLocally(obj,func)

Описание

result = reduceByKeyLocally(obj,func) слияния значения для каждого ключа с помощью ассоциативного уменьшают функциональный func, и сразу возвращает результаты к драйверу.

Входные параметры

развернуть все

Вход RDD в виде RDD объект.

Ассоциативная функция, которая будет применена к элементам входа RDD в виде указателя на функцию.

Типы данных: function_handle

Выходные аргументы

развернуть все

Список пар "ключ-значение", возвращенных в containers.Map объект.

Примеры

развернуть все

%% Connect to Spark
sparkProp = containers.Map({'spark.executor.cores'}, {'1'});
conf = matlab.compiler.mlspark.SparkConf('AppName','myApp', ...
                        'Master','local[1]','SparkProperties',sparkProp);
sc = matlab.compiler.mlspark.SparkContext(conf);

%% reduceByKeyLocally
x = sc.parallelize({ {'a',10}, {'b',20}, {'a',30}, {'b',30 } }, 2);
m = x.reduceByKeyLocally(@(x,y)(x+y)); 

Смотрите также

| | | |

Введенный в R2017b