Spark-监控

  1. 每一个spark-context都有个监控网址:http://<driver-node>:4040,若存在多个则端口号为4041、4042
  2. 默认监控只在运行时有效,若作业运行完仍需要监控,则开启spark.eventLog.enabled
  3. 如果应用日志存在,仍可构造监控UI:
    ./sbin/start-history-server.sh
原文地址:https://www.cnblogs.com/liudingchao/p/11269651.html