Hadoop Eco에서는 Spark History Server를 이용하여 Spark 작업을 모니터링할 수 있습니다.
Spark History Server는 Spark 웹 UI를 통해 사용자가 실행한 Spark 작업의 로그를 시각적으로 제공하며,
이를 활용해 작업의 실행 상태 및 결과를 확인할 수 있습니다.
주의 사항!
로그 업로드 주기에 따라 클러스터 내부 Spark History Server 간의 데이터 차이가 발생할 수 있습니다.
자세한 내용은 관련문서를 참고해 주세요.