當前位置:編程學習大全網 - 網站源碼 - spark 4040頁面 不能訪問。如果使用的是spark-shell啟動寫程序,4040可以出

spark 4040頁面 不能訪問。如果使用的是spark-shell啟動寫程序,4040可以出

4040頁面只有在有spark 任務運行時才能訪問,妳在任務訪問日誌裏也能找到類似的語句,提交job後Spark-UI才會啟動。

當任務運行完了,立馬端口就釋放了。

所以建議妳配置壹下spark-history 頁面,運行完了可以查看已經fin.shed的job,下面是簡單的配置步驟,具體的還請百度教程。

spark-default.conf中配置如下參數

spark.eventLog.enabled? true

spark.eventLog.dir? hdfs://hadoopmaster:8020/user/spark_event_log

spark.history.fs.logDirectory hdfs://hadoopmaster:8020/user/spark_event_log

web ui? pleted applications,而不是completed applications

  • 上一篇:怎麽統計從某個導航網站鏈接到商城入口
  • 下一篇:福州駕校!!
  • copyright 2024編程學習大全網