Hortonworks shc未解析的依赖项

Question

我想使用hbase hortonworks连接器。github指南

但是我不知道如何在我的项目中导入它。我有以下build.sbt：

name := "project"

version := "1.0"

scalaVersion := "2.11.8"

libraryDependencies ++= Seq(
  "org.apache.spark" % "spark-core_2.11" % "2.2.0",
  "org.apache.spark" % "spark-sql_2.11" % "2.2.0",
  "org.scala-lang" % "scala-compiler" % "2.11.8",
  "com.hortonworks" % "shc" % "1.1.2-2.1-s_2.11-SNAPSHOT"
)

它给出了以下未解决的依赖关系：

错误：导入SBT项目时出错：

[警告]==本地：尝试[警告]常春藤。xml[警告]==公共：已尝试[警告]
https://repo1.maven.org/maven2/com/hortonworks/shc/1.1.2-2.1-s_2.11-SNAPSHOT/shc-1.1.2-2.1-s_2.11-SNAPSHOT.pom[信息]正在解析jline#jline；2.12.1 ... 【警告】::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::::[警告]：：com。hortonworks#shc；1.1.2-2.1-s\U 2.11-快照：找不到[警告]:::::::::::::::::::::::::::::::::::::::::::::::::::[警告][警告]注意：未解析的依赖项路径：[警告]com。hortonworks：shc:1.1.2-2.1-s\u 2.11-SNAPSHOT（build.sbt#L8-14）[警告]-默认值：project\u 2.11:1.0[跟踪]堆栈跟踪已抑制：运行“last*：ssExtractDependencies”以获得完整输出。[跟踪]堆栈跟踪被抑制：对完整输出运行“上次：更新”。[错误]（：sExtractDependencies）sbt。ResolveException：未解析的依赖项：com。hortonworks#shc；1.1.2-2.1-s\U 2.11-快照：未找到[错误]（*：更新）sbt。ResolveException：未解析的依赖项：com。hortonworks#shc；1.1.2-2.1-s\U 2.11-快照：未找到[错误]总时间：7秒，已完成3 AOT 2017 11:36:37

Answer 1

我的建议是不要使用最新版本的Spark，因为所有最新版本都有一些错误需要修复。尝试使用2.1.2火花版本而不是2.2.0并转到maven存储库尝试此链接

在这里，您将获得Spark的所有相关依赖项。

Answer 2

在解决方案中，需要添加表示存储库的解析程序行。

scalaVersion := "2.11.12"

val sparkVersion = "2.1.0"

resolvers += "Hortonworks Repository" at "http://repo.hortonworks.com/content/repositories/releases/"

libraryDependencies += "org.apache.spark" %% "spark-core" % sparkVersion
libraryDependencies += "org.apache.spark" %% "spark-sql" % sparkVersion

libraryDependencies ++= Seq(
  "com.hortonworks" % "shc-core" % "1.1.1-2.1-s_2.11"
)