在配置单元中执行命令时发生异常

Question

insert into table test values(1,'2231');

然后错误显示在蜂巢：

失败：执行错误，从org.apache.hadoop.hive.ql.exec.mr.MapRedWork返回代码-101。org.apache.hadoop.mapreduce.v2.util.MRApps.setEnvFromInputProperties（Ljava/util/Map；Ljava/lang/String；Ljava/lang/String；Lorg/apache/hadoop/conf/Configsion；）V

我查了一下hive.log.it显示

2021-03-17T17:25:30,851 ERROR[0ca47af1-d66d-4aa2-86cd-0a3a42cc53a6 main]exec. TaskRunner：在执行任务java.lang.NoSuchmetodError：org.apache.hadoop.mapreduce.v2.util.MRApps.setEnvFromInputProperties（Ljava/util/Map； Ljava/lang/String； Ljava/lang/String； Lorg/apache/hadoop/conf/Configsion；）V atorg.apache.hadoop.mapred.YARNRunner.setupContainerLaunchContextForAM（YARNRunner.java:537) ~[ hadoop-mapreduce-client-jobclient-3.2.2.jar：？]atorg.apache.hadoop.mapred.YARNRunner.createApplication SubmissionContext（YARNRunner.java:584）~[hadoop-mapreduce-client-jobclient-3.2.2.jar：？]atorg.apache.hadoop.mapred.YARNRunner.submit作业（YARNRunner.java:326）~[hadoop-mapreduce-client-jobclient-3.2.2.jar：？]在org.apache.hadoop.mapreduce.工作ubmitter.submit工作内部（工作ubmitter.java:251）~[hadoop-mapreduce-client-core-3.1.3.jar：？]在org.apache.hadoop.mapreduce.Job11美元. run（工作. java： 1570）~[hadopop-mapreate-client-core-3.1.3. jar：？]在org. apache. hadoop. mapreits. Job11美元. run（工作. java： 1567）~[hadopop-mapreate-client-core-3.1.3. jar：？]在java. security. AccessController. doPrivileged（本机方法）~[？： 1.8.0_181]在javax. security. auAs（Subject. java： 422）~[？： 1.8.0_181]在org. apache. hadoop. security. doAs（UserGroupInformation. java： 1762）~[hadopop-conal-3.2.2. jar：？]在org. apache. hadoop. mapreop. Jab.JobClient1美元. run（JobClient. java： 571）~[hadoop-mapreent-client-core-3.1.3. jar：？]在java. security. AccessController. doPrivileged（Native方法）~[？： 1.8.0_181]在javax. security. auth. Subject. doAs（Subject. java： 422）~[？： 1.8.0_181]在org. apache. hadoop. security. UserGroupInformation. doAs（UserGroupInformation. java： 1762）~[hadoop-conal-3.2.2. jar：？]在org. apache. hadoop. mapred. JobClient. submitJob内部（JobClient. java： 571）~[hadoop-mapreate-client-core-3.1.3. jar：？]在org. apache. hadoop. mapred. Job驱动程序。启动任务（Driver. java： 2183）~[hive-exec-2.3.8. jar： 2.3.8]在org. apache. hadoop. hive. ql。驱动程序。执行（Driver. java： 1839）~[hive-exec-2.3.8. jar： 2.3.8]在org. apache. hadoop. hive. ql。驱动程序。运行内部（Driver. java： 1526）~[hive-exec-2.3.8. jar： 2.3.8]在org. apache. hadoop. hive. ql。驱动程序。运行（Driver. java： 1237）~[hive-exec-2.3.8. jar： 2.3.8]在org. apache. hadoop. hive. ql。驱动程序。运行（Driver. java： 1227）~[hive-exec-2.3.8. jar： 2.3.8]在org. apache. hadoop. cliv.CliDriver. main（CliDriver. java： 686）~[hive-cli-2.3.8. jar： 2.3.8]at sun. reava. NativeMEodAccessorInm. tnke0（Native方法）~[？： 1.8.0_181]at sun. reava. NativeMEodAccessorInm. Invoke（NativeMEodAccessorInm. java： 62）~[？： 1.8.0_181]at sun. reava. java： 43）~[？： 1.8.0_181]at java. lang. reect. method. Invoke（法. java： 498）~[？： 1.8.0_181]at org. apache. hadoop. util. RunJar. run（RunJar. java： 323）~[hadoop-公共-3.2.2. jar：？]at org. apache. hadoop. util. RunJar. main（RunJar. java： 236MRApps. setEnvFromInputProperty（Ljava/util/Map；Ljava/lang/String；Ljava/lang/String；Lorg/apache/hadoop/conf/Configsion；）V 2021-03-17T17:25:30,851 INFO[0ca47af1-d66d-4aa2-86cd-0a3a42cc53a6 main]ql.驱动程序：已完成执行命令（queryId=root_20210317172524_9be7ad6e-0e7c-4951-826f-44daf163e8ba）；耗时：5.586秒2021-03-17T17:25:30,856 INFO[0ca47af1-d66d-4aa2-86cd-0a3a42cc53a6 main]conf. HiveConf：使用传入的默认值为log id：0ca47af1-d66d-4aa2-86cd-0a3a42cc53a6 20

Answer 1

您正在使用common3.2.2库：

hadoop-common-3.2.2.jar

在org上。阿帕奇。hadoop。util。RunJar。run（RunJar.java:32）~[hadoop-common-3.2.2.jar:？]

调用的方法在客户端公共库的3.2.2版本中实现。此外，您使用的核心版本不正确：

hadoop-mapreduce-client-core-3.1.3.jar

在org上。阿帕奇。hadoop。mapreduce。(...) ~[hadoop-mapreduce-client-core-3.1.3.jar:？]

更改以下版本的MR客户端核心、客户端公用和客户端应用程序：

hadoop-mapreduce-client-core-3.2.2。jar

hadoop-mapreduce-client-common-3.2。jar

hadoop-mapreduce-client-app-3.2.2.jar代码