exponenta event banner

Развертывание массивов Tall в кластере Hadoop с поддержкой искр

Создание и выполнение приложений MATLAB ® с массивами tall в кластере Hadoop ® с поддержкой Spark™

Поддерживаемая платформа: только Linux ®.

Развертывание приложения MATLAB, содержащего массивы tall, в кластере Hadoop с поддержкой Spark состоит из двух частей:

  • Создание и упаковка автономного приложения в среде рабочего стола MATLAB.

  • Выполнение автономного приложения в кластере Hadoop с поддержкой Spark из оболочки Linux.

Полный пример развертывания массивов tall в кластере Hadoop с поддержкой Spark см. в разделе Пример развертывания массивов Tall в кластере Hadoop с поддержкой Spark. Чтобы развернуть приложения Spark с высоким массивом в Cloudera ® CDH, следуйте тем же инструкциям .

Классы

matlab.mapreduce.DeploySparkMapReducerНастройка приложения высокого массива MATLAB с параметрами Spark как пар ключ-значение

Функции

mapreducerОпределение среды выполнения для массивов mapreduction или tall

Темы

Основы Apache Spark

Изучите основные концепции Apache Spark™ и узнайте, как эти концепции связаны с развертыванием приложений MATLAB в Spark.

Примеры

Пример развертывания массивов Tall в кластере Hadoop с поддержкой искр

Полный пример развертывания приложения MATLAB с высоким массивом в кластере Hadoop с поддержкой Spark.