当前位置: 首页 > 知识库问答 >
问题:

Hadoop NFS装入问题

哈襦宗
2023-03-14

我正在尝试将NFS共享从windows Server2012挂载到我的Hadoop集群(运行Hadoop 2.7.3),这样它就可以在上传到windows服务器的文件上运行MapReduce。Hadoop集群正在raspberry PI2(其中8个)上运行,我已经在Hadoop wiki上进行了配置

我已经尝试将NFS挂载到主机上的HDFS目录(/HDFS/tmp/datanode)上,但在nameNode上是无法访问的。

我装错地方了吗?

共有1个答案

杜辉
2023-03-14

没关系,我已经更改了我的解决方案,将NFS挂载到namenode上,并且crontab脚本将需要的文件放到hdfs上

#! /bin/bash
inotifywait -mr -e create --format '%w%f' /hdfs-nfs/* | while read NEWFILE; do
    echo "${NEWFILE} detected"
    hadoop fs -put "${NEWFILE}" /
done
 类似资料:
  • 我已经创建了一个spring-hibernate应用程序,当通过命令提示符执行时,它可以完美地执行。 我按以下方式加载应用程序上下文 由于我是Spring和Hibernate的新手,请让我知道我是否可以将这个简单的Java独立应用程序与web应用程序一起使用。或者我应该做什么改变?

  • 在phpinfo中有在php -m中没有 先确认CLI模式下是否有,命令行输入php --ri swoole 如果输出了Swoole的扩展信息就说明你安装成功了! 99.999%的人在此步成功就可以直接使用swoole了 不需要管php -m或者phpinfo网页打印出来是否有swoole 因为Swoole是运行在cli模式下的,在传统的fpm模式下功能十分有限 fpm模式下任何异步/协程等主要功

  • 我有一个,它从

  • 封装一个ADO.net,插入一条数据不能显示插入内容而是变量名 调用封装方法 封装的方法 设置断点后看到,形参已经拿到输入内容,但是变量始终没有赋值成功。

  • 我遵循本教程安装Hadoop。不幸的是,当我运行start all时。sh脚本-控制台上打印了以下错误: 当我执行JPS命令时,抛出了以下错误 我是hadoop新手,请给我指一篇文章,这篇文章将帮助我安装hadoop而不会出现问题 或者,如果可能(更可取)解决所面临的问题,请让我知道出现了什么问题以及如何解决?

  • 如果Sphinx构建失败,请您按照以下步骤进行: 确认您的DBMS的头文件和库文件都正确安装了(例如,检查mysql-devel包已经安装) 报告Sphinx的版本和配置文件(别忘了删除数据库连接密码),MySQL(或PostgreSQL)配置文件信息,gcc版本,操作系统版本和CPU类型(例如x86、x86-64、PowerPC等): mysql_config gcc --version una