当前位置: 首页 > 知识库问答 >
问题:

使用spring xd执行Pig脚本时出错

邵飞白
2023-03-14

我正在尝试使用spring xd执行pig代码段,但不能这样做。我使用以下命令创建了一个作业

job create --name Pig_job --definition "PigTest" --deploy

PigTest作业定义在spring xd模块/作业目录中定义如下

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"



xmlns:hdp="http://www.springframework.org/schema/hadoop"
xmlns:context="http://www.springframework.org/schema/context"
xmlns:util="http://www.springframework.org/schema/util"
xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd
    http://www.springframework.org/schema/context http://www.springframework.org/schema/context/spring-context.xsd
    http://www.springframework.org/schema/util http://www.springframework.org/schema/util/spring-util.xsd
    http://www.springframework.org/schema/hadoop http://www.springframework.org/schema/hadoop/spring-hadoop.xsd">


<hdp:pig-runner id="pigRunner" run-at-startup="true">
   <hdp:script>
         student = LOAD '/user/KhiTest/Test123/student' AS     (Id:int,Name:chararray,Year:int);
         DUMP student;
   </hdp:script>
   </hdp:pig-runner>

</beans>

已成功创建作业,但部署失败。日志文件如下所示:

null

共有1个答案

史骏祥
2023-03-14

原因:java.lang.ClassNotFoundException:org.apache.pig.backend.ExecutionEngine.ExecJob

是否将pig添加到模块的/lib中?

 类似资料:
  • 我已经在我的系统中安装了python、pip和selenium,我正在基本站点上测试一个示例代码。 代码: 如何解决此问题?

  • 当我试图使用执行PHP脚本时,它不起作用。 在错误日志文件中显示: PHP警告:shell_exec()[function.shell exec]:无法执行'PHP/home/snabsam/public_html/。。。。。 系统 Centos shell_exec与clamscan配合使用 与clamav的功能配合使用 但它没有执行PHP脚本 我检查过的东西: PHP是off 不存在于在php

  • Invoke-WebRequest:请求中止:无法创建SSL/TLS安全通道。在C:\users\njujjavarapu\desktop\snapshot.ps1:8 char:1+Invoke-WebRequest-uri https://njidlsdsapp01/support invoke-RestMethod:请求中止:无法创建SSL/TLS安全通道。在C:\users\njujjav

  • 我是新加入Broadleaf电子商务的,几天前也安装了同样的软件。Maven构建是成功的,但是在启动Startadmin时出错。批处理文件。我尝试过增加堆内存,但没有效果。你们中有人遇到过类似的错误吗? 错误打开zip文件或JAR清单丢失:目标/代理/斯普林-仪器. jar 虚拟机代理库初始化过程中发生错误未能初始化:仪器 虚拟机初始化过程中发生错误太小的初始堆 虚拟机初始化过程中发生错误太小的初

  • 我在HDFS中有大量. gz文件,我正在尝试使用PigStorage加载它们来处理数据,我得到了以下异常 Java语言io。EOFException:组织的输入流意外结束。阿帕奇。hadoop。io。压紧解压缩流。在org上解压缩(DecompressorStream.java:137)。阿帕奇。hadoop。io。压紧解压缩流。在java上读取(DecompressorStream.java:7

  • 当试图用Jenkins编译一个简单的Grails2.1应用程序时,我遇到了失败,原因如下: 执行脚本编译时出错:启动失败:/tmp/jenkins-grails/projects/eskridgebudget/scriptcache/_grailscompile_groovy.class(没有这样的文件或目录) 可能有关联,也可能没有关联。 我可以从命令行在同一个框上成功地构建同一个项目。 Gra