将数据从Twitter流式传输到HDFS命令不起作用
我想将数据从高音扬声器流式传输到hdfs，我使用了以下命令：./bin/Flume-ng代理-n TwitterAgent-c conf-f /usr/lib/apache-flume-1.4.0-bin/conf/flume.conf
我不能得到我期望的结果。没有数据流。
谁有linus命令可以将数据从tweeter传输到hdfs？
共有1个答案
首先从您的终端转到 apache-flume-1.4.0-bin 目录
1] cd apache-flume-1.4.0-bin
然后在终端上写入以下命令
2] bin/flume-ng agent --conf ./conf/ -f conf/flume.conf -Dflume.root.logger=DEBUG，console -n TwitterAgent
-
-bash-4.1$ 任何帮助都将不胜感激。
-
我在Ubuntu 14.04上使用Hadoop-1.2.1 我正在尝试使用Flume-1.6.0将数据从twitter流式传输到HDFS。我已经下载了Flume-sources-1.0-SNAPSHOT。jar并将其包含在flume/lib文件夹中。我已经设置了flume-sources-1.0-SNAPSHOT的路径。jar在conf/FLUME环境中显示为FLUME_CLASSPATH。这是我
-
我第一次尝试Kafka，并使用AWS MSK设置Kafka群集。目标是将数据从MySQL服务器流式传输到Postgresql。我使用debezium MySQL连接器作为源，使用Confluent JDBC连接器作为接收器。 MySQL配置： 注册Mysql连接器后，其状态为“正在运行”，并捕获MySQL表中所做的更改，并以以下格式在消费者控制台中显示结果： 我的第一个问题：在表中“金额”列是“十
-
如何将日志文件从Windows 7传输到Linux中的HDFS？ Windows中的水槽出现错误 我已经在Windows 7（节点1）上安装了“flume-node-0.9.3”。“flumenode”服务正在运行，localhost:35862可以访问 在Windows中，日志文件位于“C:/logs/Weblogic”。log' CentOS Linux（节点2）中的Flume代理也在运行。
-
问题内容： 我想使用elasticsearch-river-mysql以便将数据从MySQL数据库连续传输到ElasticSearch。我是ES和Rivers的初学者，所以希望您能为我的问题提供帮助。 据我所知，数据将从MySQL数据库流式传输到ES集群，后者将自动对其进行索引。那是对的吗？我需要了解任何超时或限制吗？ 关系数据库表之间的外键关系将如何转换为ES？包含外键的表行是否将成为ES文档的
-
我正在尝试使用apache flume将数据加载到hbase中。当我使用flume将数据传输到hadoop时，它工作得很好。但是当我启动flume代理将数据加载到hbase时，我得到了NoClassDefFoundError。 这是我的水槽配置: flume-env.sh 代理4.conf