hdfs中的文件路径

Question

我想从Hadoop文件系统中读取该文件。

为了实现文件的正确路径，我需要hdfs的主机名和端口地址。

最后，我的文件路径看起来像

Path path = new Path("hdfs://123.23.12.4344:9000/user/filename.txt")

现在我想知道如何提取主机名=“123.23.12.4344”

基本上，我想访问亚马逊电子病历上的文件系统，但是，当我使用

 FileSystem fs = FileSystem.get(getConf());

 
You possibly called FileSystem.get(conf) when you should have called FileSystem.get(uri, conf) to obtain a file system supporting your path

Answer 1

您可以使用这两种方法中的任何一种来解决您的错误。

一,

String infile = "file.txt";
Path ofile = new Path(infile);
FileSystem fs = ofile.getFileSystem(getConf());

二,

Configuration conf = getConf();
System.out.println("fs.default.name : - " + conf.get("fs.default.name"));
// It prints uri  as : hdfs://10.214.15.165:9000 or something
String uri = conf.get("fs.default.name");
FileSystem fs = FileSystem.get(uri,getConf());