Hortonworks shc 未解决的依赖项

Posted 2023-03-24

【中文标题】Hortonworks shc 未解决的依赖项

【英文标题】：Hortonworks shc unresolved dependencies

【发布时间】：2018-01-10 20:24:00

【问题描述】：

我想使用 hbase hortonworks 连接器。 github guide

但我不知道如何在我的项目中导入它。 我有以下 build.sbt ：

name := "project"

version := "1.0"

scalaVersion := "2.11.8"

libraryDependencies ++= Seq(
  "org.apache.spark" % "spark-core_2.11" % "2.2.0",
  "org.apache.spark" % "spark-sql_2.11" % "2.2.0",
  "org.scala-lang" % "scala-compiler" % "2.11.8",
  "com.hortonworks" % "shc" % "1.1.2-2.1-s_2.11-SNAPSHOT"
)

它给了我以下未解决的依赖关系：

错误：导入 SBT 项目时出错：...[警告] ==== 本地：尝试 [警告] ivy.xml [警告] ==== 公共：尝试 [警告]https://repo1.maven.org/maven2/com/hortonworks/shc/1.1.2-2.1-s_2.11-SNAPSHOT/shc-1.1.2-2.1-s_2.11-SNAPSHOT.pom [信息] 正在解决 jline#jline;2.12.1 ... [警告] :::::::::::::::::::::::::::::::::::::::::::::: [警告]： : 未解决的依赖::[警告] :::::::::::::::::::::::::::::::::::::::::::::: [警告]： ： com.hortonworks#shc;1.1.2-2.1-s_2.11-SNAPSHOT：未找到 [警告] :::::::::::::::::::::::::::::::::::::::::::::: [警告] [警告] 注意： 未解决的依赖路径：[警告] com.hortonworks:shc:1.1.2-2.1-s_2.11-SNAPSHOT (build.sbt#L8-14) [警告] +- 默认值：project_2.11:1.0 [trace] 堆栈跟踪被抑制： 运行 'last *:ssExtractDependencies' 以获得完整输出。 [跟踪] 堆栈 跟踪抑制：运行 'last :update' 以获得完整输出。 [错误] (:ssExtractDependencies) sbt.ResolveException: 未解决的依赖: com.hortonworks#shc;1.1.2-2.1-s_2.11-SNAPSHOT：未找到 [错误] (*:update) sbt.ResolveException：未解决的依赖： com.hortonworks#shc;1.1.2-2.1-s_2.11-SNAPSHOT：未找到 [错误] 总计 时间：7 s，完成 3 août 2017 11:36:37

【参考方案1】：

在您的解决方案中，您需要添加代表存储库的 resolvers 行。

scalaVersion := "2.11.12"

val sparkVersion = "2.1.0"

resolvers += "Hortonworks Repository" at "http://repo.hortonworks.com/content/repositories/releases/"

libraryDependencies += "org.apache.spark" %% "spark-core" % sparkVersion
libraryDependencies += "org.apache.spark" %% "spark-sql" % sparkVersion

libraryDependencies ++= Seq(
  "com.hortonworks" % "shc-core" % "1.1.1-2.1-s_2.11"
)

【参考方案2】：

我的建议是不要使用最新版本的 Spark，因为所有最新版本都有一些错误需要修复。尝试使用 2.1.2 spark 版本而不是 2.2.0 并转到 maven 存储库试试这个link

在这里，您将获得 spark 的所有相关依赖项。