當前位置:編程學習大全網 - 網站源碼 - 如何遠程讀取CDH的hadoop上的HDFS數據

如何遠程讀取CDH的hadoop上的HDFS數據

需要在實例化出來的Configuration中加入HDFS的端口路徑即可,其他的除了hadoop的jar包外,任何配置文件都不需要,核心代碼如下:

static Configuration conf=new Configuration();

static FileSystem fs=null;

static{

try {

//默認的hadoop的fs.defaultFS的端口號為8020,這裏需要跟集群裏面的配置壹致

conf.set("fs.defaultFS","hdfs://dnode1:8020/");

fs=FileSystem.get(conf);

} catch (IOException e) {

log.error("初始化FileSystem失敗!",e);

}

}

OK,只需要這簡單的壹行,我們就可以讀取HDFS上的數據了

  • 上一篇:紅外同傳系統的設備要求是什麽?
  • 下一篇:錢包選股源代碼
  • copyright 2024編程學習大全網