parallel.cluster.Hadoop

Создайте кластерный объект Hadoop

Описание

пример

hadoopCluster = parallel.cluster.Hadoop создает объект parallel.cluster.Hadoop, представляющий кластер Hadoop®.

Вы используете полученный объект в качестве входа к mapreduce и mapreducer функции, для определения кластера Hadoop как параллельная среда выполнения для длинных массивов и mapreduce.

hadoopCluster = parallel.cluster.Hadoop(Name,Value) использует указанные имена и значения, чтобы установить свойства на созданном объекте parallel.cluster.Hadoop.

Примеры

свернуть все

В этом примере показано, как создать и использовать объект parallel.cluster.Hadoop установить кластер Hadoop, когда mapreduce параллелен среде выполнения.

hadoopCluster = parallel.cluster.Hadoop('HadoopInstallFolder','/host/hadoop-install');
mr = mapreducer(hadoopCluster);

В этом примере показано, как создать и использовать объект parallel.cluster.Hadoop установить кластер Hadoop, когда длинный массив параллелен среде выполнения.

hadoopCluster = parallel.cluster.Hadoop(...
    'HadoopInstallFolder','/host/hadoop-install', ...
    'SparkInstallFolder','/host/spark-install');
mr = mapreducer(hadoopCluster);

Входные параметры

свернуть все

Аргументы в виде пар имя-значение

Задайте дополнительные разделенные запятой пары Name,Value аргументы. Name имя аргумента и Value соответствующее значение. Name должен появиться в кавычках. Вы можете задать несколько аргументов в виде пар имен и значений в любом порядке, например: Name1, Value1, ..., NameN, ValueN.

Пример: 'HadoopInstallFolder','/share/hadoop/a1.2.1'

Путь к MATLAB для рабочих, заданных как разделенная запятой пара, состоящая из 'ClusterMatlabRoot' и вектор символов. Это указывает на установку MATLAB Parallel Server™ для рабочих, ли локальный для каждой машины или на сетевом ресурсе.

Путь к файлу конфигурации приложения Hadoop, заданному как разделенная запятой пара, состоящая из 'HadoopConfigurationFile' и вектор символов.

Путь к установке Hadoop на локальной машине, заданной как разделенная запятой пара, состоящая из 'HadoopInstallFolder' и вектор символов. Если это свойство не установлено, значением по умолчанию является значение, заданное переменной окружения HADOOP_PREFIX, или если это не установлено, то HADOOP_HOME.

Путь к Spark включил установку Hadoop на машинах рабочего, заданных как разделенная запятой пара, состоящая из 'SparkInstallFolder' и вектор символов. Если это свойство не установлено, значением по умолчанию является значение, заданное переменной окружения SPARK_PREFIX, или если это не установлено, то SPARK_HOME.

Выходные аргументы

свернуть все

Кластер Hadoop, возвращенный как объект parallel.cluster.Hadoop.

Введенный в R2014b