Задать вопрос
@nano_e_t_4
apache-spark

Как мониторить спарк?

Всем драсьте
Подскажите кто знает, как мониторить спарк, без использования сторонних пакетов\движков
  • Вопрос задан
  • 84 просмотра
Комментировать
Подписаться 1 Оценить Комментировать
Помогут разобраться в теме Все курсы
  • Учебный центр IBS
    EAS-015 Основы Hadoop
    1 неделя
    Далее
  • Сетевая Академия ЛАНИТ
    Реализация решений данных в Microsoft Azure
    1 неделя
    Далее
Пригласить эксперта
Ответы на вопрос 1
@magazovski
Что вы вкладываете в слово "мониторить" ?
Логи можно смотреть в Spark History Server
Там же базовую инфу по таймингам
Пока приложение работает, он поднимает SparkUI, там тоже можно что то смотреть
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Аналитик-разработчик (команда Intelligent Search)
Сбер • Москва
от 250 000 до 400 000 ₽
Middle/Senior Data Scientist (команда ИИ и аналитика)
Сбер • Москва
от 200 000 до 350 000 ₽
Инженер данных в Плюс Фантех
Яндекс • Москва
от 300 000 до 490 000 ₽
Ещё вакансии