4040頁面只有在有spark 任務運行時才能訪問,妳在任務訪問日誌裏也能找到類似的語句,提交job後Spark-UI才會啟動。
當任務運行完了,立馬端口就釋放了。
所以建議妳配置壹下spark-history 頁面,運行完了可以查看已經fin.shed的job,下面是簡單的配置步驟,具體的還請百度教程。
spark-default.conf中配置如下參數
spark.eventLog.enabled? true
spark.eventLog.dir? hdfs://hadoopmaster:8020/user/spark_event_log
spark.history.fs.logDirectory hdfs://hadoopmaster:8020/user/spark_event_log
web ui? pleted applications,而不是completed applications