Развертывание высоких массивов на кластере Hadoop с поддержкой Spark

Создайте и выполните MATLAB® приложения с длинными массивами против Spark™ включили Hadoop® кластер

Поддерживаемая платформа: Linux® только.

Развертывание приложения MATLAB, которое содержит длинные массивы против включенного кластера Hadoop Spark, состоит из двух частей:

  • Создание и упаковка автономного приложения в среде рабочего стола MATLAB.

  • Выполнение автономного приложения на Spark включило кластер Hadoop из интерпретатора Linux.

Для полного примера при развертывании длинных массивов к Spark включил кластер Hadoop, смотрите Пример при Развертывании Длинных массивов к Spark Enabled Кластер Hadoop. Можно следовать тем же инструкциям, чтобы развернуть приложения Spark длинного массива в Cloudera® CDH.

Классы

matlab.mapreduce.DeploySparkMapReducerСконфигурируйте приложение длинного массива MATLAB параметрами Spark как пары "ключ-значение"

Функции

mapreducerЗадайте среду выполнения для mapreduce или tall arrays

Темы

Основы Spark Apache

Изучите основной Apache концепции Spark™ и смотрите, как эти концепции относятся к развертывающимся приложениям MATLAB к Spark.

Пример при развертывании длинных массивов к Spark Enabled кластер Hadoop

Полный пример, показывающий, как развернуть приложение MATLAB длинного массива в Spark, включил кластер Hadoop.