配置单元：尝试创建动态分区时发生致命错误

Question

    create table MY_DATA0(session_id STRING, userid BIGINT,date_time STRING, ip STRING, URL STRING ,country STRING, state STRING, city STRING) 
ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' LINES 
TERMINATED BY '\n' STORED AS TEXTFILE ;

    LOAD DATA INPATH '/inputhive' OVERWRITE INTO TABLE MY_DATA0;

    create table part0(session_id STRING, userid BIGINT,date_time STRING, ip STRING, URL STRING) partitioned by (country STRING, state STRING, city STRING) 

    clustered by (userid) into 256 buckets ROW FORMAT DELIMITED FIELDS 
    TERMINATED BY ',' LINES TERMINATED BY '\n' STORED AS TEXTFILE ;

    \insert overwrite table part0 partition(country, state, city) select session_id, userid, date_time,ip, url, country, state,city from my_data0;

我的数据集概述：

{60A191CB-B3CA-496E-B33B-0ACA551DD503}，1331582487,2012-03-12 13:01:27，66.91.193.75，http://www.acme.com/SH55126545/VD55179433，美国，夏威夷豪拉

{365CC356-7822-8A42-51D2-B6396F8FC5BF}，1331584835,2012-03-12 13:40:35，173.172.214.24，http://www.acme.com/SH55126545/VD55179433，美国， El Paso， Texas

当我运行最后一个插入脚本时，我得到一个错误：

java.lang.运行时异常：org.apache.hadoop.hive.ql.metadata.HiveFatalExctive：[Error 20004]：当节点试图创建太多动态分区时发生致命错误。动态分区的最大数量由hive.exec.max.dynamic.partitions和hive.exec.max.dynamic.partitions.pernode.最大设置为： 100

附言：

我设置了两个属性：

蜂箱执行官。动态隔断模式：非严格

蜂箱执行真的

Answer 1

分区列应该在选择语句中最后提到。例如：如果状态是分区列，那么“插入表t1分区（状态）从t2中选择id、name、Dept、salt、state”；这将是可行的。例如，如果我的查询是这样的“插入表t1分区（状态）从t2中选择Id、name、Dept、state”，那么分区将被创建为工资（sall）列

Answer 2

尝试将这些属性设置为更高的值。

SET hive.exec.max.dynamic.partitions=100000;
SET hive.exec.max.dynamic.partitions.pernode=100000;