Hive MapReduce作业提交失败“目标是目录”

Question

我一直在玩弄Hadoop及其姊妹项目，在这一过程中我遇到了一些问题，但我最终遇到了一个我找不到答案的问题：

我有一个hive表存储在hdfs上，作为一个制表符分隔的文本文件。我可以在表上做一个基本的选择，但是一旦我把查询做得稍微复杂一点，hive就把它变成了一个映射还原作业，这个作业在下面的堆栈跟踪中失败了

13/11/29 08:31:00错误安全。UserGroupInformation:PriviledEdActionException as:hduser（auth:SIMPLE）原因：java。伊奥。IOException:Target/tmp/hadoop-

dfs上确实存在有问题的文件夹，至少是“/tmp/hadoop-thread/staging”部分，无论我将其权限设置为什么，hive或hadoop都会在提交作业时重置它们。真正令人担忧的是，完整路径似乎是一个生成的文件夹名，那么为什么软件本身生成的东西会有问题呢？为什么路径是目录是个问题？它应该是什么呢？

编辑：这是我正在使用的表和我试图运行的查询：查询：从hive_flow_details选择*，其中node_id=100限制10；

表：

col_name data_type comment id bigint None
flow_versions_id int None
node_id int None
node_name string None

请记住，我尝试的任何带有where子句的查询都会发生这种情况，因为hive将其转换为MR job。

Answer 1

我最终解决了这个问题。我在清理的类路径中发现了冲突的罐子，从那以后我就没有问题了。