草庐IT

r - Hadoop 流式传输在 RHadoop 中失败,错误代码为 1

我正在通过以下代码使用RHadoop:Sys.setenv(HADOOP_OPTS="-Djava.library.path=/usr/local/hadoop/lib/native")Sys.setenv(HADOOP_HOME="/usr/local/hadoop")Sys.setenv(HADOOP_CMD="/usr/local/hadoop/bin/hadoop")Sys.setenv(HADOOP_STREAMING="/usr/local/hadoop/share/hadoop/tools/lib/hadoop-streaming-3.0.0.jar")Sys.seten

RHadoop 作业在单节点 Ubuntu 集群上失败

我第二次发布类似的问题,因为我相信我现在对这个问题有了更准确的看法。环境:Hadoop2.2.0在Ubuntu14.04笔记本电脑上作为单节点集群运行。RStudio版本0.98.507,R版本3.0.2(2013-09-25),Java版本1.7.0_55任何R(或Python)程序都可以与位于/usr/local/hadoop220/share/hadoop/tools/lib/hadoop-streaming-2.2.0.jar的HadoopStreaming实用程序完美配合当我们使用包“rmr”(RHadoop的一部分)并从RStudio中运行的R程序内部调用mapreduce

r - 如何在Rhadoop中的rmr map reduce中捕获R后台代码

我是RHadoop的新手。我能够使用Hadoop运行rmr包的mapreduce功能。基本上在后台R在Java中运行这个映射减少代码。意思是R把这个R的mapreduce代码转成Java,所以能不能在运行mapreduce的时候得到java后台代码。谁能帮帮我? 最佳答案 在Rhadoop中,R并没有将RMapReduce代码转换为java。Rhadoop提供了MapReduce接口(interface);mapper和reducer可以用R代码描述,然后从R中调用。RhadooppackagewillsubmitRcodetoHa

r - 是否有提供 RHadoop 框架而不仅仅是 Hadoop 的云服务?

因为我现在正在开发一个POC应用程序,所以我更喜欢免费服务,因为如果概念最终没有成功,花钱在一个想法上是没有意义的。PS:我查了一下谷歌,但大多数服务目前只提供Hadoop而不是RHadoop 最佳答案 本文提供了有关在AmazonEC2上设置RHadoop的幻灯片的链接:http://blog.revolutionanalytics.com/2012/03/r-and-hadoop-step-by-step-tutorials.html 关于r-是否有提供RHadoop框架而不仅仅是H

r - RHadoop 中的 hdfs.init() 错误

"C:/ProgramFiles/Java/jdk1.8.0_181")library(rJava)library(rhdfs)library(rmr2)hdfs.init()AftersettingupHadoopsinglenodeclusteronmymachine,ItriedtoexecutecommandsusingR-Studioinwindows.However,Iamgettinganerrormessagewithfollowingcode:Sys.setenv(HADOOP_HOME="C:/hadoop-2.7.3")Sys.setenv(HADOOP_CMD=

r - 在 32 位 Ubuntu 上安装 RHadoop

关闭。这个问题是off-topic.它目前不接受答案。想改进这个问题吗?Updatethequestion所以它是on-topic用于堆栈溢出。关闭9年前。Improvethisquestion目标:在单一系统(非虚拟机版本)上安装RHadoop系统规范:32位处理器、2GB内存、Windows7和Ubuntu12.10说明:我正在尝试使用RHadoop库通过R运行Hadoop。由于我的系统RAM较少,所以如果我尝试运行ClouderaVM,它会变得非常慢。我已经在网上浏览了一些教程,比如1.InsallingRHadoop2.RHadooponAmazonEC2但是都没有完整的步骤。

带有 RHadoop 作业的 R + Hadoop 在单机集群上失败

作为新手,可能会问一些愚蠢的问题,在此先表示歉意。我已经在单机集群(Ubuntu14.04)上安装了Hadoop,并成功测试了Apache安装指南中指定的非常基本的程序。随后,我安装了R、RStudio以及软件包rhdfs、rmr2和所有依赖项。然后我尝试运行以下程序:Sys.setenv(HADOOP_CMD="/usr/local/hadoop/bin/hadoop")Sys.setenv(HADOOP_STREAMING="/usr/local/hadoop/contrib/streaming/hadoop-streaming-1.2.1.jar")library('rhdfs'

java - Rhadoop 单机基本任务

我在Rhadoop中运行以下代码:Sys.setenv(HADOOP_HOME="/home/ashkan/Downloads/hadoop-1.0.3/")Sys.setenv(HADOOP_BIN="/home/ashkan/Downloads/hadoop-1.0.3/bin/")Sys.setenv(HADOOP_CONF_DIR="/home/ashkan/Downloads/hadoop-1.0.3/conf")Sys.setenv(HADOOP_CMD="/home/ashkan/Downloads/hadoop-1.0.3/bin/hadoop")library(Rhi

r - 如何安装 RHadoop 包(Rmr、Rhdfs、Rhbase)?

实际上我正在尽我所能与R集成,但我得到了这个错误。软件包“rmr”、“rJava”、“RJSONIO”、“rhdfs”、“rhbase”、“plyrmr”不可用(对于R版本3.1.3)将Hadoop与R集成的步骤:在ubuntu中安装了R和Hadoop。将这三行添加到~/.bashrc文件中。*exportHADOOP_PREFIX=/Users/hadoop/hadoop-1.1.2exportHADOOP_CMD=/Users/hadoop/hadoop-1.1.2/bin/hadoopexportHADOOP_STREAMING=/Users/hadoop/hadoop-1.1.
12