parallel.cluster.Hadoop

Создайте объект кластера Hadoop

Описание

пример

hadoopCluster = parallel.cluster.Hadoop создает parallel.cluster.Hadoop объект, представляющий Hadoop® кластер.

Вы используете получившийся объект как вход в mapreduce и mapreducer функций, для определения кластера Hadoop в качестве окружения параллельного выполнения для длинных массивов и mapreduce.

hadoopCluster = parallel.cluster.Hadoop(Name,Value) использует указанные имена и значения, чтобы задать свойства созданного объекта parallel.cluster.Hadoop.

Примеры

свернуть все

В этом примере показано, как создать и использовать объект parallel.cluster.Hadoop, чтобы задать кластер Hadoop в качестве окружения параллельного выполнения mapreduce.

hadoopCluster = parallel.cluster.Hadoop('HadoopInstallFolder','/host/hadoop-install');
mr = mapreducer(hadoopCluster);

В этом примере показано, как создать и использовать объект parallel.cluster.Hadoop, чтобы задать кластер Hadoop как окружение параллельного выполнения длинный массив.

hadoopCluster = parallel.cluster.Hadoop(...
    'HadoopInstallFolder','/host/hadoop-install', ...
    'SparkInstallFolder','/host/spark-install');
mr = mapreducer(hadoopCluster);

Входные параметры

свернуть все

Аргументы в виде пар имя-значение

Задайте необязательные разделенные разделенными запятой парами Name,Value аргументы. Name - имя аргумента и Value - соответствующее значение. Name должны находиться внутри кавычек. Можно задать несколько аргументов в виде пар имен и значений в любом порядке Name1,Value1,...,NameN,ValueN.

Пример: 'HadoopInstallFolder','/share/hadoop/a1.2.1'

Путь к MATLAB для рабочих, заданный как разделенная разделенными запятой парами, состоящая из 'ClusterMatlabRoot' и вектор символов. Это указывает на установку MATLAB Parallel Server™ для рабочих, локальных для каждой машины или для сетевого общего ресурса.

Путь к файлу строения приложения Hadoop, заданный как разделенная разделенными запятой парами, состоящая из 'HadoopConfigurationFile' и вектор символов.

Путь к установке Hadoop на локальной машине, заданный как разделенная разделенными запятой парами, состоящая из 'HadoopInstallFolder' и вектор символов. Если это свойство не задано, по умолчанию это значение, заданное переменной окружения HADOOP_PREFIX, или если это не задано, то HADOOP_HOME.

Путь Hadoop на рабочих машинах с поддержкой Path to Spark, заданная как разделенная разделенными запятой парами, состоящая из 'SparkInstallFolder' и вектор символов. Если это свойство не задано, по умолчанию это значение, заданное переменной окружения SPARK_PREFIX, или если это не задано, то SPARK_HOME.

Выходные аргументы

свернуть все

Кластер Hadoop, возвращенный как parallel.cluster.Hadoop объект.

Введенный в R2014b