Apache Spark生成错误
我正在ubuntu 14.04.4(spark版本：1.6.0和Scala代码运行器版本2.10.4)中使用命令构建Apache spark源代码
sudo SBT/SBT组件
并得到以下错误,
[warn]def deterecurity（dir：TachyonFile,client：TachyonFS）{
[warn]^
[错误]
[错误]编译时：/home/ashish/spark-apps/spark-1.6.1/core/src/main/scala/org/apache/spark/util/random/package.scala
[错误]在阶段：jvm期间
[错误]库版本：版本2.10.5
[错误]编译器版本：版本2.10.5
[错误]重构参数：-deprecationct.spark/unused/jars/unused-1.0.0.jar:/home/ashish/.ivy2/cache/com.google.guava/guava/bundles/guava-14.0.1.jar:/home/ashish/.ivy2/cache/io.netty/nettyall/jars/nettyall-4.0.29.final.jar:/home/ashish/.ivy2/cache/org.fusesource.leveldbjni/leveldbjni-all/bundles/leveldbjni-all-1.8.jar:/home/ashish/.ivy2/
[错误]
[错误]最后一个类型树：Literal（常量(collection.mutable.map))
[错误]
符号定义：null
[错误]
tpe:Class(Classof[scala.collection.mutable.map])
[错误]
符号所有者:
[错误]上下文所有者：package package->package random
[错误]
[错误]==封闭模板或块==
[错误]
[错误]模板（//val：在package random中颂歌>.超级.“”//def():Object类中的对象，树。tpe=()Object
[错误]Nil
[错误]
[错误]
[错误]
[错误]
[错误]
[错误]
[错误]==树的扩展类型==
[错误]
[错误]ConstantType（值=常数（Collection.mutable.map））
[错误]
[错误]编译期间未捕获异常：java.io.ioException
[错误]文件名太长
[warn]45发现警告
[错误]发现两个错误
我哪里错了？
共有1个答案
你应该和Maven建立火花...
下载源代码并运行./bin/mvn clean包
-
给定一个包含以下格式数据的大文件（V1，V2，…，VN） 我正在尝试使用Spark获得一个类似于下面的配对列表 我尝试了针对一个较旧的问题所提到的建议，但我遇到了一些问题。例如， 我得到了错误， 有人能告诉我哪些地方我可能做得不对，或者有什么更好的方法可以达到同样的效果？非常感谢。
-
我有一个项目的RDD，还有一个函数 。 收集RDD的两个小样本，然后这两个数组。这很好，但无法扩展。 有什么想法吗？ 谢谢 编辑：下面是如何压缩每个分区中具有不同项数的两个示例： 关键是，虽然RDD的. zip方法不接受大小不等的分区，但迭代器的. zip方法接受（并丢弃较长迭代器的剩余部分）。
-
我有以下代码片段 我尝试运行应用程序时出现以下错误（部分） 似乎type="num "没有被处理。我怀疑年龄int也可能是一个问题，因为它是一个int，但需要一个string。从sting到int的反向转换也可能是一个问题。 任何帮助是值得赞赏的。 谢谢
-
我有一个基于maven的scala/java混合应用程序，可以提交spar作业。我的应用程序jar“myapp.jar”在lib文件夹中有一些嵌套的jar。其中之一是“common.jar”。我在清单文件中定义了类路径属性，比如。Spark executor抛出在客户端模式下提交应用程序时出错。类（com/myapp/common/myclass.Class）和jar（common.jar）在那里
-
我正在尝试使用Eclipse为一个涉及Gazebo（一个流行的机器人模拟器）的项目进行开发。Gazebo提供了一个插件系统，允许与模拟器进行外部交互，并提供了一系列关于如何编写插件的教程。 在成功地学习了这些教程之后，我尝试将代码迁移到Eclipse，使用cmake-g“Eclipse cdt4-unix makefiles”[buildpath]生成一个Eclipse rpoject，然后将其导
-
我创建了一个简单的. proto文件并执行了编译器（protoc-2.5.0rc1-win32.zip）。为规定的包生成了一个java文件。但是，生成的文件不会编译。. proto文件很简单，只有一条消息，其中包含一堆简单类型的可选字段（正确编号）。. java文件不编译，例如： 构造函数生成了消息。FieldAccessorTable（Descriptors.Descriptor，字符串[]）未
-
我有一个JS应用程序。它在linux上运行良好，但在Windows10中我遇到了一个错误。 不正确的代码是 我在github中找到了这个错误的原因，我想问题是spawn nodejs spawn Doc在windows中无法正常工作。但我不知道如何修改这段代码使其工作。有人能帮我吗？
-
我尝试在android studio中创建我的第一个项目，使用我尝试运行应用程序的一个示例，但是gradle给了我这个构建错误（没有更改一行代码--只是尝试运行空活动）： Gradle：Failure：生成失败，出现异常。*错误：任务“：PassiveLocation：PackageDebug”执行失败。