Mapreduce如何獲取讀取資料夾下檔案的名字
阿新 • • 發佈:2018-11-09
需要注意的導包的時候導這兩個包
import org.apache.hadoop.mapreduce.InputSplit;
import org.apache.hadoop.mapreduce.lib.input.FileSplit;
---------------------
作者:聞雷
來源:CSDN
原文:https://blog.csdn.net/qq_41950069/article/details/80446912
只需要獲得檔案的名字:
InputSplit inputSplit=(InputSplit)context.getInputSplit();
String filename=((FileSplit)inputSplit).getPath().getName();
簡化後:String filename=((FileSplit)context.getInputSplit()).getPath().getName();
System.out.println(filename);
如果需要獲得在hdfs上的絕對路徑,可以用以下程式碼實現:
String filepath = ((FileSplit)context.getInputSplit()).getPath().toString();
- 1
獲取檔名的大致流程為:Context(map函式裡) → InputSplit → FileSplit → Path → String(file name)。