在 R 中使用 mapreduce

Posted

技术标签:

【中文标题】在 R 中使用 mapreduce【英文标题】:using mapreduce in R 【发布时间】:2012-12-19 18:10:45 【问题描述】:

我正在尝试使用 R 进行 mapreduce。有一个名为 mapReduce 的 R 包,但它的功能不适用于复杂的 mapreduce 应用程序。 我正在为我的数据库使用 mongodb 并使用 R 的 rmongodb 包来访问它。现在如果你需要做一些 mapredece,有人知道一个好的 R 包吗?

【问题讨论】:

【参考方案1】:

看看 RHadoop (http://blog.revolutionanalytics.com/2011/09/mapreduce-hadoop-r.html)。 也许还有更多的东西可以提供......

问候

【讨论】:

是的,他们有一个 mapreduce,但需要安装 hadoop 和 HDFS 才能工作。

以上是关于在 R 中使用 mapreduce的主要内容,如果未能解决你的问题,请参考以下文章

大数据框架之Hadoop:MapReduceMapReduce框架原理——Join多种应用

大数据框架之Hadoop:MapReduceMapReduce框架原理——OutputFormat数据输出

MongoDB--MapReduce分布统计s

技术汇总

凌达干货 | MapReduce介绍

大数据技术栈