Задать вопрос
@nano_e_t_4
apache-spark

Как мониторить спарк?

Всем драсьте
Подскажите кто знает, как мониторить спарк, без использования сторонних пакетов\движков
  • Вопрос задан
  • 80 просмотров
Комментировать
Подписаться 1 Оценить Комментировать
Пригласить эксперта
Ответы на вопрос 1
@magazovski
Что вы вкладываете в слово "мониторить" ?
Логи можно смотреть в Spark History Server
Там же базовую инфу по таймингам
Пока приложение работает, он поднимает SparkUI, там тоже можно что то смотреть
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Data Engineer
Автомакон • Москва
от 250 000 ₽
ML-инженер (удаленно)
Wanted. • Санкт-Петербург
До 200 000 ₽
Разработчик хранилища данных (АС Персона)
Сбер • Москва
от 300 000 ₽
Ещё вакансии
Заказы с Хабр Фриланса
Расшифровать требуемые параметры из CAN-шины авто Chery Tiggo 7 Pro
23 дек. 2024, в 00:27
20000 руб./за проект
Отправка команды на (раз)блокировку двигателя Chery Tiggo 7 Pro
23 дек. 2024, в 00:15
20000 руб./за проект
Собрать из исходного кода и запустить в докере рабочее приложение с бд
22 дек. 2024, в 22:57
500 руб./за проект
Ещё заказы