当前位置: 首页 > 知识库问答 >
问题:

sqoop将数据从Teradata传输到HDFS

孙朝明
2023-03-14

-bash-4.1$

任何帮助都将不胜感激。

共有1个答案

陆城
2023-03-14

要使用Cloudera发行版使Teradata正常工作,您需要执行以下操作:

  1. 在/var/lib/sqoop中安装Teradata JDBC JAR。对我来说,它们是terajdbc4.jar和tdgssconfig.jar.
  2. 安装由Teradata支持的Cloudera连接器,或者安装在文件系统某个位置的用于Teradata的Cloudera连接器(我更喜欢/var/lib/sqoop)。
  3. 在/etc/sqoop/conf/managers.d/中创建一个文件(任意名称)并添加com.cloudera.connector.teradata.teradatamanagerFactory= 。例如,我有/etc/sqoop/conf/managers.d/teradata=>com.cloudera.connector.teradata.teradata.teradataAgerFactory=/var/lib/sqoop/sqoop-connector-teradata-1.2c5.jar.

安装Teradata连接器也有不同的方法。例如,使用Cloudera管理器可能更容易。

 类似资料:
  • 问题内容: 我正在尝试使用Django和D3.js编写非常基本的条形图。我有一个名为play的对象,其中datetime字段称为date。我想做的是显示按月分组的播放次数。基本上我有两个问题: 我如何按月份将这些分组,并计算当月的播放次数 将这些信息从Django转换为D3可用的最佳方法是什么。 现在,我在这里查看了其他答案,并尝试了 这接近于我想要的信息,但是当我尝试将其输出到模板中时,它在月末

  • 问题内容: 我知道如何使用jinja模板将数据从python传递到javascript,但是我想将javascript变量传递到python。我想这样做而无需重新加载页面。那可能吗? 问题答案: 是的,就像monkut所说的那样-我相信您想使用JSON和Javascript / jQuery。 这将允许从客户端到服务器的通讯,然后再返回。 我发现的最适用的示例是在Flask片段/模式中:http

  • 我是AVRO的新手,我正在尝试将AVRO格式的数据从SQL Server导入到HDFS。

  • 我对AWS很陌生,我正试图找到一种方法,将数据从动觉流可靠地传输到AWS RDS postgres数据库表。记录在输入的过程中需要进行一些小的转换,比如filter(不是所有的记录都会被插入,这取决于一个键),然后解析以插入postgres。目前,来自动觉流的数据正被消防水带作为拼花地板倾倒到S3桶中。 我有点迷失在做这件事的许多可能的方式中,比如: 运动流- 在一个非无服务器的世界里,我会每隔一

  • 问题内容: 我需要将数据从一个表复制到另一个表。这两个表几乎具有相同的结构,但是位于不同的数据库中。 我试过了 我尝试此操作,但跨数据库出现错误…未实现 问题答案: 这是一个非常简单的任务。只需为此目的使用dblink: 如果您需要定期从外部数据库中获取数据,明智的做法是定义服务器和用户映射。然后,您可以使用较短的语句:

  • 我想将数据从高音扬声器流式传输到hdfs,我使用了以下命令:./bin/Flume-ng代理-n TwitterAgent-c conf-f /usr/lib/apache-flume-1.4.0-bin/conf/flume.conf 我不能得到我期望的结果。没有数据流。 谁有linus命令可以将数据从tweeter传输到hdfs?