草庐IT

hadoop - 使用 Whirr 启动 EC2 集群

我目前正在学习JefferyBreen的教程。当我想用Whirr启动ec2集群时遇到了一些麻烦。我使用的是cloudera演示vmcdh3u4。我下载了whirr0.8.1版本这是我运行的所有命令:$wgethttp://mirror.switch.ch/mirror/apache/dist/whirr/whirr-0.8.1/whirr-0.8.1.tar.gz$tarzxfwhirr-0.8.0.tar.gz$exportPATH="~/whirr-0.8.0/bin:$PATH"$exportAWS_ACCESS_KEY_ID=MYACCESSKEY$exportAWS_SECR

amazon-web-services - 使用 whirr 启动集群

我是whirr和AWS的新手,所以如果我问的问题很愚蠢,请提前致歉。我遵循指示here设置whirr和bin/whirrlaunch-cluster--confighadoop.properties失败并出现以下情况:[~/src/cloudera/whirr-0.1.0+23]$bin/whirrversionrvm:ruby-1.8.7-p299ApacheWhirr0.1.0+23[~/src/cloudera/whirr-0.1.0+23]$bin/whirrlaunch-cluster--confighadoop.propertiesrvm:ruby-1.8.7-p299La

amazon-ec2 - 如何使用 Apache Whirr 在 AWS 上建立单节点 Hadoop 实例?

我正在尝试使用ApacheWhirr在AmazonWebServices上运行Hadoop的单节点实例。我将whirr.instance-templates设置为1jt+nn+dn+tt。该实例启动正常。我能够创建目录,但是当我尝试put文件时,我得到一个Filecouldonlybereplicatedto0nodes,insteadof1error。当我执行hadoopfsck/时,出现Exceptioninthread"main"java.net.ConnectException:Connectionrefused错误。有谁知道我的配置有什么问题吗?

hadoop - 如何通过 whirr 在 EC2 集群上安装 JDK 7?

我有一些由OracleJDK7编译的map-reduce程序。我正在尝试使用whirr0.8.1来设置EC2集群来运行它们。不过whirr0.8.1默认安装的JDK好像是OpenJDK6,我在运行它们时遇到了以下错误:不支持的major.minor版本51.0因此我尝试通过设置指定whirr的JDK版本:whirr.java.install-function=install_oracle_jdk7但这会导致安装过程失败,尝试修改以下脚本似乎没有用:whirr-0.8.1\core\src\main\resources\functions\install_oracle_jdk7.sh有谁