Spark提交类未找到异常
我正在使用这个快速入门教程，尝试使用spark submit命令运行这个简单的spark应用程序。http://spark.apache.org/docs/1.2.0/quick-start.html#self-包含的应用程序。当我尝试使用spark-1.4.0-bin-hadoop2.6\bin运行它时
java.lang.ClassNotFoundException: SimpleApp
at java.net.URLClassLoader$1.run(Unknown Source)
at java.net.URLClassLoader$1.run(Unknown Source)
at java.security.AccessController.doPrivileged(Native Method)
at java.net.URLClassLoader.findClass(Unknown Source)
at java.lang.ClassLoader.loadClass(Unknown Source)
at java.lang.ClassLoader.loadClass(Unknown Source)
at java.lang.Class.forName0(Native Method)
at java.lang.Class.forName(Unknown Source)
at org.apache.spark.deploy.SparkSubmit$.org$apache$spark$deploy$SparkSub
mit$$runMain(SparkSubmit.scala:633)
at org.apache.spark.deploy.SparkSubmit$.doRunMain$1(SparkSubmit.scala:16
9)
at org.apache.spark.deploy.SparkSubmit$.submit(SparkSubmit.scala:192)
at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:111)
at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala)
Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties
15/06/17 09:45:11 INFO Utils: Shutdown hook called
有人知道如何解决这个问题吗？非常感谢任何帮助。
共有3个答案
此外，您可以将“local”设置为master，以便在本地运行它，更好地适应开发期。
解决这个问题的简单方法是检查你的全名，在我的例子中，它是main。Java语言SimpleApp成功了。感谢Svend指出
问题是我们必须将类文件提交给我们要执行或将用作支持文件的火花集群，因此请按照以下步骤操作-
>
jar cf myJar。jar myClass。班
编辑您的代码如下-
val jarFile="SimpleApp.jar"；#路径
val conf=新SparkConf（）。setAppName（“简单应用程序”）。setJars（数组（jarFile））；
-
问题内容： 我从这篇博客文章中获得了帮助： 但是我发现com.mysql.jdbc.driver类未找到异常。那篇博客文章的不同之处在于，在我的案例中，他们尝试连接到mysql而不是MS SQL。到目前为止，这是我的代码：package com.example.dbtry; 请告诉我我在做什么错。我还在清单中添加了对Internet的许可。 问题答案： 从以下位置下载jar：http：//www.
-
我在将Web应用程序部署到WebLogic服务器12c时遇到问题。Web应用程序依赖于服务jar（内部依赖于Hibernate类）。当我构建战争时，它不包括Web应用程序的WEB-INF/lib/文件夹中的hibernate-entitymanager.jar，并且它的部署失败，例外是“ClassNotFoundExceptionorg.hibernate.ejb.HibernatePeraxy”
-
我的应用程序超过了64k个方法，所以我应该实现多索引，最初我遇到的问题是“本地路径不存在”，我解决了这个问题，现在gradle生成了类1。dex和classes2。dex，但在低于Lollipop的环境中不工作。。它在Lollipop中工作得很好，因为它有天然的支持。错误是这样说的“ 看过一些教程后，他们说必须改变1.gradle2.application3.manifest 我对申请课了解不多.
-
我试图通过JWS为我的java项目分发签名jar，我所做的是 我已经把我的班级档案装进了一个罐子 使用keytool-keytool-genkey-keystore xxx-alias xxx创建密码 使用jarsigner-keystore xxx测试对jar进行签名。jar xxx-命令 但我的错误是没有发现类异常。太阳安全工具。贾西纳。 我使用的是JDK1.6.0.21。我试着打开工具。ja
-
这是我用scala编写的代码 使用sbt包编译时收到的错误是hereimage 这是我的build.sbt档案 名称：=“OV” 规模厌恶：=“2.11.8” // https://mvnrepository.com/artifact/org.apache.spark/spark-corelibraryDependencies=“org.apache.spark”%%“spark核心”%%“2.3
-
问题内容： 我在项目中使用了KSOP2，并且这些天一直都在工作。最近，我买了一台新机器，并将项目移到新机器上，并将ksoap库导入到项目等中，当我尝试运行该应用程序时，我在模拟器中遇到以下错误 这是引发异常的地方。 与64位计算机有关？？ 这些年来一直有效的应用程序为何突然停止工作？有人可以启发我。我坚持下去。谢谢您的时间。 问题答案： 我设法通过解决问题 在项目中创建一个文件夹“ libs” 将