r 安装RHadoop

Posted 2021-05-24

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了r 安装RHadoop相关的知识，希望对你有一定的参考价值。

install.packages(c('RCurl','rJava','RJSONIO', 'itertools', 'digest','Rcpp','httr','functional','devtools','plyr','reshape2','R.methodsS3','hydroPSO','pryr',"bitops","functional","reshape2","stringr","caTools"))

Sys.setenv(HADOOP_CMD="/usr/bin/hadoop") 
Sys.setenv(HADOOP_STREAMING="/usr/hdp/2.2.0.0-2041/hadoop-mapreduce/hadoop-streaming.jar")

library("devtools")

install_github("RevolutionAnalytics/rmr2/pkg")
install_github("RevolutionAnalytics/rhdfs/pkg")
install_github("RevolutionAnalytics/plyrmr/pkg")
install_github("RevolutionAnalytics/ravro/pkg/ravro")

以上是关于r 安装RHadoop的主要内容，如果未能解决你的问题，请参考以下文章

R+Hadoop处理数据小报告

RODPS介绍

Distributed R

如何让Hadoop结合R语言做统计和大数据分析

RHadoop 中的 hdfs.init() 错误

rhadoop linear regression 问题