哈道普流无法访问罐子存档

Question

我正在运行这个hadoop流命令:

/home/hduser/hadoop/bin/hadoop jar
/home/hduser/hadoop/share/hadoop/tools/lib
/hadoop-*streaming*.jar 
-file audio.py 
-cacheArchive        hdfs://localhost:54310/user/hduser
  /input/audio/cacheaudiodir.jar#cacheaudiodir 
-input /user/hduser/input/audio -output /user/hduser/output
-mapper audio.py -cmdenv AUDIO_DIR=cacheaudiodir

当我尝试在我的Python映射器中引用“缓存音频”时，我收到错误：没有这样的文件或目录，例如：

dir_a='cacheaudiodir'
filelist_a = commands.getoutput('/home/hduser/hadoop/bin/hadoop fs -ls ' + dir_a)

如何指向此符号链接文件夹中的文件？

Answer 1

看起来cachearchive是本地的，而不是在hdfs中，所以“hadoop fs-ls”找不到任何东西，而“ls”却找不到。