无法更改对hdfs目录的读写权限

Question

我正在尝试将文本文件复制到hdfs位置。
我面临访问问题，所以我尝试更改权限。
但我无法更改以下相同的面临错误：

chaithu@localhost:~$ hadoop fs -put test.txt /user
put: Permission denied: user=chaithu, access=WRITE, inode="/user":hdfs:supergroup:drwxr-xr-x

chaithu@localhost:~$ hadoop fs -chmod 777 /user
chmod: changing permissions of '/user': Permission denied. user=chaithu is not the owner of inode=user

chaithu@localhost:~$ hadoop fs -ls /
Found 2 items
drwxrwxrwt   - hdfs supergroup          0 2017-12-20 00:23 /tmp
drwxr-xr-x   - hdfs supergroup          0 2017-12-20 10:24 /user

Answer 1

首先，您不应该直接写入/user文件夹，也不应该在其中设置777

您需要当前用户的用户目录来运行mapreduce作业，因此需要首先sudo su-hdfs才能成为HDFS超级用户。

然后运行这些文件为您的用户帐户创建HDFS目录

 hdfs dfs -mkdir -p /user/chaithu
 hdfs dfs -chown -R chaithu /user/chaithu
 hdfs dfs -chmod -R 770 /user/chaithu

hadoop fs -put test.txt

仅此一项就会将文件放在当前用户的文件夹中。

或者，如果这对您来说是太多的工作，而不是写/tmp

一个懒惰的选项是将您的用户帐户改写为超级用户。

export HADOOP_USER_NAME=hdfs 
hadoop fs -put test.txt /user

这就是为什么hadoop在默认情况下不安全或不强制用户帐户访问的原因（即在生产中从不这样做）

最后，您可以在hdfs-site.xml中完全关闭权限（同样，只在开发阶段有用）

 <property>
    <name>dfs.permissions</name>
    <value>false</value>
  </property>