Kafka Connect可以成为我的Hadoop集群的一部分吗？
我目前正在使用一个由10个节点（1个名称节点和9个数据节点）组成的Hadoop集群，其中运行Hbase、Hive、Kafka、Zookeeper和Hadoop的其他echo系统。现在我想从RDBMS中获取数据，并将其实时存储在HDFS中。我们可以在同一个集群中使用Confluent Source Connector和HDFS2 Sink Connector吗？还是我需要为Kafka Connect创建一个单独的集群？
共有1个答案
-
我有两个节点的完全分布式Hadoop和Hbase实例。HDFS在主机和从机上工作良好。但是HBase shell只在节点名格式化之后工作一次，并且集群是新的，之后我得到错误：error：org.apache.hadoop.HBase.PleaseHoldException：Master is initializing HBase 我也不能通过hbase shell从slave连接我总是得到错误连接
-
本文档提供一个可扩展、高可用的 Seafile 集群架构。这种架构主要是面向较大规模的集群环境，可以通过增加更多的服务器来提升服务性能。如果您只需要高可用特性，请参考3节点高可用集群文档。 架构" class="reference-link"> 架构 Seafile集群方案采用了3层架构： 负载均衡层：将接入的流量分配到 seafile 服务器上。并且可以通过部署多个负载均衡器来实现高可用。 Se
-
我不能写一个唯一的javascript，可以分配ID被直接链接访问和显示。在页面上，我有这个图片和标题库： 但是经过我所有的研究，我只到这一步，它不起作用。另外，我不应该每次都需要取消指定id，否则我会用脚本填充页面。
-
本文档介绍用 3 台服务器构建 Seafile 高可用集群的架构。这里介绍的架构仅能实现“服务高可用”，而不能支持通过扩展更多的节点来提升服务性能。如果您需要“可扩展 + 高可用”的方案，请参考Seafile 可扩展集群文档。 在这种高可用架构中包含3个主要的系统部件： Seafile 服务器：提供 Seafile 服务的软件 MariaDB 数据库集群：保存小部分的 Seafile 元数据，比如
-
我已经在Kubernetes上建立了Spark独立集群，并试图连接到Kubernetes上没有的Kerberized Hadoop集群。我已经将core-site.xml和hdfs-site.xml放在Spark集群的容器中，并相应地设置了HADOOP_CONF_DIR。我能够成功地在Spark容器中为访问Hadoop集群的principal生成kerberos凭据缓存。但是当我运行spark-s
-
每当我启动Hadoop集群时，系统都会询问密码。 我已经在.ssh文件夹中添加了密钥。 开始-dfs.sh 19/01/22 20:38:56警告util.nativeCodeLoader：无法为您的平台加载本机Hadoop库...使用内置Java类（如果适用）在[localhost]xxxx@localhost's password上启动namenode：localhost:启动namenode