Раздел «Apache Spark»

Подробное описание работы в Apache Spark приведено по адресу https://spark.apache.org/docs/latest/.

Доступ к консоли Spark Master через auth-bridge позволяет авторизованным пользователям просмотреть, что происходит в текущий момент в Spark Master (потребляемые ресурсы, доступные обработчики и прочее).

Для перехода в раздел «Apache Spark» в адресной строке web-браузера добавьте в конце ссылки на Систему значение «spark». Например, для приложения, размещенного по адресу http://example.com/, раздел «Apache Spark» открывается по ссылке http://example.com/spark.

После ввода необходимого адреса в строке web-браузера откроется окно консоли Spark Master (Рисунок «Раздел «Apache Spark»). Раздел доступен только авторизованным пользователям.

Рисунок 26. Раздел «Apache Spark»

Раздел «Apache Spark»

Консоль Spark Master представляет собой три таблицы со списками обработчиков, запущенных и выполненных процессов.

Таблицы с запущенными и выполненными процессами содержат следующие столбцы:

  • ID процесса;

  • наименование процесса;

  • ядра;

  • выделенная память;

  • выделенные ресурсы;

  • время запуска процесса;

  • пользователь;

  • состояние;

  • продолжительность.