exponenta event banner

parallel.cluster. Hadoop

Создать объект кластера Hadoop

Описание

пример

hadoopCluster = parallel.cluster.Hadoop создает parallel.cluster.Hadoop объект, представляющий кластер Hadoop ®.

Результирующий объект используется в качестве входных данных для mapreduce и mapreducer для задания кластера Hadoop в качестве среды параллельного выполнения для массивов tall и mapreduce.

hadoopCluster = parallel.cluster.Hadoop(Name,Value) использует указанные имена и значения для задания свойств созданного объекта parallel.cluster.Hadoop.

Примеры

свернуть все

В этом примере показано, как создать и использовать объект parallel.cluster.Hadoop для установки кластера Hadoop в качестве среды параллельного выполнения mapreduction.

hadoopCluster = parallel.cluster.Hadoop('HadoopInstallFolder','/host/hadoop-install');
mr = mapreducer(hadoopCluster);

В этом примере показано, как создать и использовать объект parallel.cluster.Hadoop для установки кластера Hadoop в качестве среды параллельного выполнения с высоким массивом.

hadoopCluster = parallel.cluster.Hadoop(...
    'HadoopInstallFolder','/host/hadoop-install', ...
    'SparkInstallFolder','/host/spark-install');
mr = mapreducer(hadoopCluster);

Входные аргументы

свернуть все

Аргументы пары «имя-значение»

Укажите дополнительные пары, разделенные запятыми Name,Value аргументы. Name является именем аргумента и Value - соответствующее значение. Name должен отображаться внутри кавычек. Можно указать несколько аргументов пары имен и значений в любом порядке как Name1,Value1,...,NameN,ValueN.

Пример: 'HadoopInstallFolder','/share/hadoop/a1.2.1'

Путь к MATLAB для работников, указанный как разделенная запятыми пара, состоящая из 'ClusterMatlabRoot' и вектор символов. Это указывает на установку Parallel Server™ MATLAB для работников, как локальных для каждой машины, так и для общего сетевого ресурса.

Путь к файлу конфигурации приложения Hadoop, указанному как разделенная запятыми пара, состоящая из 'HadoopConfigurationFile' и вектор символов.

Путь к установке Hadoop на локальном компьютере, указанный как разделенная запятыми пара, состоящая из 'HadoopInstallFolder' и вектор символов. Если это свойство не задано, значением по умолчанию является значение, указанное переменной среды HADOOP_PREFIXили если это не установлено, то HADOOP_HOME.

Путь к установке Hadoop с поддержкой Spark на рабочих машинах, указанный как разделенная запятыми пара, состоящая из 'SparkInstallFolder' и вектор символов. Если это свойство не задано, значением по умолчанию является значение, указанное переменной среды SPARK_PREFIXили если это не установлено, то SPARK_HOME.

Выходные аргументы

свернуть все

Кластер Hadoop, возвращенный как parallel.cluster.Hadoop объект.

Представлен в R2014b