mongo-hadoop 集成问题

Posted

技术标签:

【中文标题】mongo-hadoop 集成问题【英文标题】:mongo-hadoop integration issue 【发布时间】:2016-02-13 07:43:54 【问题描述】:

我正在尝试集成 Hadoop 和 Mongo。我从 git 下载了 mongo-hadoop 文件,并尝试使用下面的方法构建 jar 文件。但是我遇到了错误

[krishna@localhost mongo-hadoop]$ ./gradlew jar –Phadoop_version='2.4'

FAILURE: Build failed with an exception.

* Where:
Build file '/home/krishna/mongo-hadoop/build.gradle' line: 318

* What went wrong:
A problem occurred evaluating root project 'mongo-hadoop'.
> Could not resolve all dependencies for configuration ':spark:compile'.
> Could not download artifact 'commons-math3.jar  (org.apache.commons:commons-math3:3.4.1)'
  > Could not GET 'https://repo1.maven.org/maven2/org/apache/commons/commons-math3/3.4.1/commons-math3-3.4.1.jar'.
     > Network is unreachable

* Try:
Run with --stacktrace option to get the stack trace. Run with --info or -- debug option to get more log output.

BUILD FAILED

谁能告诉我如何解决这个问题

【问题讨论】:

【参考方案1】:

您确定有网络连接吗?

在控制台试试这个检查网络是否正常:

$ wget https://repo1.maven.org/maven2/org/apache/commons/commons-math3/3.4.1/commons-math3-3.4.1.jar

【讨论】:

【参考方案2】:

我的防火墙阻止了连接。所以我禁用了防火墙并重新启动了虚拟机。现在它运行良好

【讨论】:

以上是关于mongo-hadoop 集成问题的主要内容,如果未能解决你的问题,请参考以下文章

如何使用适用于 Spark 的 Mongo-Hadoop 连接器删除文档(记录)

使用hadoop读写mongodb

CDH5.15.1 hive 连接mongodb配置及增删改查

等效于 mongo 的 out:reduce 选项在 hadoop

网站集成paypal问题

PayPal 集成 - 重定向问题