如何将Sqoop从Oracle导入压缩分区配置单元表
如何在压缩表中实现从Oracle到配置单元的Sqoop导入
配置单元：创建外部表xx.tmp_member3（a字符串、kpi_name字符串、b字符串、c字符串），由（YEAR INT,MONTH INT,DAY INT）行格式分隔字段以“”终止，“存储为ORC位置”/ENVIR./2019/4/20190416"TBLPROPERTIES（“ORC.compress”=“bzip2”）；
我已经尝试了'set hive.exec.orc.split.strategy=bi'，但没有成功。
共有1个答案
我个人会用两个步骤来解决这个问题。
第一种方法是将数据从Oracle获取到一个正常的配置单元文本格式的stage表，然后根据您的需求将数据从stage获取到具有压缩格式的配置单元orc表。
-
我想将数据从postgres导入到配置单元，然后输入以下命令： 但我看到这条失败的消息： 问题是什么？我如何修复这个故障？？？
-
我试图使用将数据从复制到。但是，尽管我在文件中设置了变量，但仍然出现了以下错误。下面是我的代码： bashrc文件中的变量： 错误： 我还需要在这里添加/修改什么？？
-
错误：java.io.ioException：无法导出数据，请在org.apache.sqoop.mapreduce.textexportMapper.map（textexportMapper.java:112)在org.apache.sqoop.mapreduce.textexportMapper.map（textexportMapper.java:39)在org.apache.sqoop.ma
-
查询示例： 典型错误消息： 处理语句时出错：失败：执行错误，从org.apache.hadoop.hive.ql.exec.mr.MapredTask返回代码2 问题2：当我运行命令？我是否只运行相同的命令，但使用STRING而不是bigint？**完整错误消息:**
-
我需要将记录流插入到配置单元分区表中。表结构类似于 我想了解一下Hive是如何处理内部表中的插入的。 是否将所有记录插入到yyyy_mm_dd=2018_08_31目录中的单个文件中？或者配置单元在一个分区内拆分为多个文件,如果是,什么时候拆？ 如果每天有100万条记录，并且查询模式介于日期范围之间，那么下面哪一条性能好？ 内部表中没有分区 按日期分区，每个日期只有一个文件 按日期分区，每个日期有