草庐IT

Cloudera-Manager-Installation

全部标签

java - 如何让 WordCount.java 在 Cloudera 4 上编译?

我正在尝试在Cloudera4的Linux(CentOS)安装上编译一个简单的WordCount.javamap-reduce示例。当我引用任何hadoop类时,我总是遇到编译器错误,但我无法弄清楚/usr/lib/hadoop下的数百个jar中的哪些我需要添加到我的类路径中才能编译。任何帮助将不胜感激!我最想要的是一个用于字数统计的Java文件(以防万一我发现的文件由于某种原因不好)以及用于编译和运行它的相关命令。我正在尝试仅使用javac而不是Eclipse来执行此操作。无论哪种方式,我的主要问题是Cloudera4安装中的Hadoop库到底是什么,我需要包含这些库才能编译经典的W

hadoop - 从 quickstart.cloudera/172.17.0.2 调用 quickstart.cloudera :8020 failed on connection exception: java.net.ConnectException: Connection refused

我是Docker和Hadoop系统的新手。我已经在Ubuntu16.04中安装了Docker,并在一个新的Docker容器中运行来自Cloudera的Hadoop镜像。但是当我尝试在hdfs中运行任何命令时,错误消息显示为:CallFromquickstart.cloudera/172.17.0.2toquickstart.cloudera:8020failedonconnectionexception:java.net.ConnectException:Connectionrefused;我不知道如何解决这个问题。我期待您的帮助。 最佳答案

hadoop - CDH(Cloudera Distribution for hadoop) 是开源的吗?

CDH(ClouderaDistributionforhadoop)是开源的还是商业的?非常感谢对此的任何意见。 最佳答案 "AllsoftwaredevelopedbyClouderaforCDHisreleasedwithanApache2.0license".换句话说,它是开源的。 关于hadoop-CDH(ClouderaDistributionforhadoop)是开源的吗?,我们在StackOverflow上找到一个类似的问题: https://s

hadoop - oozie 中的配置单元操作失败(在 cloudera CDH 4.1.1 上)

当我使用oozieodCDH4.1.1运行配置单元脚本时运行失败:ErrorCodeJA018ErrorMessageorg/apache/hadoop/hive/cli/CliDriverDetailsPropertyValueExternalIdjob_201211281608_0112ExternalStatusFAILED/KILLEDDataNoneStarttimeSat,01Dec201203:02:37EndtimeSat,01Dec201203:03:07Id0000007-121128160850795-oozie-oozi-W@ExchangeRateTestRe

hadoop - Cloudera Impala 使元数据无效

正如在impala教程中讨论的那样,Impala使用Hive共享的Metastore。但已经提到,如果您使用配置单元在表上创建或执行某些版本,您应该执行INVALIDATEMETADATA或REFRESH命令以通知impala有关更改。所以我很困惑,我的问题是:如果元数据数据库是共享的,为什么impala需要执行INVALIDATEMETADATA或REFRESH?如果它是用于impala缓存元数据,为什么守护进程在发生缓存未命中时不更新缓存,而不需要手动刷新元数据?感谢任何帮助。 最佳答案 好的!让我们从您在评论中提出的问题开始,

compilation - 找不到 org.apache.hadoop.classification.InterfaceAudience 的 Cloudera Hadoop 类文件

这是我在尝试编译此WordCount.java文件时遇到的错误。$javac-classpath/usr/lib/hadoop/hadoop-common-2.0.0-cdh4.0.1.jar:/usr/lib/hadoop/client/hadoop-mapreduce-client-core-2.0.0-cdh4.0.1.jar-d~/wordcount/usr/lib/hadoop/wordcount_classes/WordCount.java/usr/lib/hadoop/hadoop-common-2.0.0-cdh4.0.1.jar(org/apache/hadoop/f

hadoop - 与 Cloudera 和 Hortonworks 相比,Hadoop 发行版 MapR 有哪些缺点?

关闭。这个问题是opinion-based.它目前不接受答案。想要改进这个问题?更新问题,以便editingthispost可以用事实和引用来回答它.关闭6年前。ImprovethisquestionCloudera和Hortonworks使用HDFS,这是ApacheHadoop的基本概念之一。MapR使用自己的概念/实现。您可以直接使用native文件系统,而不是HDFS。您可以在MapR的网站上找到使用这种方法的很多优势。我想知道这种方法有什么缺点?

hadoop - 如何在 Mac OS X Lion 上安装 Cloudera Hue?

有人试过吗?谷歌完全空白,到目前为止这是一个艰巨的过程(我很新,Ant等)。在下载了大量的依赖项之后,坦率地说,不明智地使用了“ln-s”和大量的“sudo”……我终于遇到了一个我无法克服的错误。$cd/Users/bob/Downloads/hue-1.2.0$sudomakeinstall[snip]---BuildingHadooppluginscd/Users/bob/Downloads/hue-1.2.0/desktop/libs/hadoop/java&&ant-Dbuild.dir=/Users/bob/Downloads/hue-1.2.0/desktop/libs/h

hadoop - 在没有cloudera manager的情况下安装cloudera impala

请提供在没有cloudera管理器的情况下在ubuntu中安装imapala的链接。无法使用官方链接安装。无法使用这些查询定位包impala:sudoapt-getinstallimpala#Binariesfordaemonssudoapt-getinstallimpala-server#Servicestart/stopscriptsudoapt-getinstallimpala-state-store#Servicestart/stopscript 最佳答案 首先你需要获取包列表并将其存储在/etc/apt/sources.l

hadoop - YARN Application Master 无法连接到 Resource Manager

我有一个4节点集群(1个名称节点/资源管理器3个数据节点/节点管理器)我正在尝试运行一个简单的tez示例orderedWordCounthadoopjarC:\HDP\tez-0.4.0.2.1.1.0-1621\tez-mapreduce-examples-0.4.0.2.1.1.0-1621.jarorderedwordcountsample/test.txt/sample/out作业被接受,Applicationmaster和容器被设置但是在节点管理器上我看到了这些日志2014-09-1017:53:31,982INFO[ServiceThread:org.apache.tez.