草庐IT

cloudera-quickstart-vm

全部标签

java - 为 Cloudera 升级 Java 版本有多安全?

我有一个运行ClouderaStandard4.7.3和CDH4.5以及Java1.6的cloudera集群。根据ClouderaDocumetation这些版本支持java1.7。我想知道这次升级是否安全,或者是否存在潜在问题? 最佳答案 我们将集群升级到java1.7,M/R作业和Hive作业都没有任何问题 关于java-为Cloudera升级Java版本有多安全?,我们在StackOverflow上找到一个类似的问题: https://stackover

java - 需要协助运行 Cloudera 提供的 WordCount.java

大家好,我正在尝试运行Cloudera提供的WordCount.java示例。我运行了下面的命令,得到了我放在命令下面的异常。那么你对如何进行有什么建议吗?我已经完成了cloudera提供的所有步骤。提前致谢。hadoopjar~/Desktop/wordcount.jarorg.myorg.WordCount~/Desktop/input~/Desktop/output错误:ERRORsecurity.UserGroupInformation:PriviledgedActionExceptionas:root(auth:SIMPLE)cause:org.apache.hadoop.m

hadoop - Cloudera 经理。未能检测到 Cloudera Manager Server

我有两台装有CentOS6.5的PCclient86-101.aihs.net80.94.86.101client86-103.aihs.net80.94.86.103cloudera-manager-server安装在client86-101.aihs.net上。我在检测ClouderaManagerServer时遇到问题(集群安装的第3步。)问题跟踪:BEGINhost-tPTR80.94.86.101101.86.94.80.in-addr.arpadomainnamepointerclient86-101.aihs.net.END(0)usingclient86-101.aih

hadoop - Datanode 没有连接到 Namenode cloudera

我想通过Talend从远程机器访问cloudera以获取大数据。为此,我通过编辑文件/etc/hosts和/etc/sysconfig/network更改了cloudera中主机的ip。我可以从Talend访问cloudera。但是问题是我的数据节点和名称节点似乎没有连接。当我检查我的Datanode的日志详细信息时,出现以下错误:BlockpoolBP-1183376682-127.0.0.1-1433878467265(DatanodeUuidnull)servicetoquickstart.cloudera/127.0.0.1:8022beginninghandshakewith

hadoop - "Child Error"in Executing stream Job on multi node Hadoop cluster (cloudera distribution CDH3u0 Hadoop 0.20.2)

我在8节点Hadoop集群上工作,我正在尝试使用指定的配置执行一个简单的流作业。hadoopjar/usr/lib/hadoop-0.20/contrib/streaming/hadoop-streaming-0.20.2-cdh3u0.jar\-Dmapred.map.max.tacker.failures=10\-Dmared.map.max.attempts=8\-Dmapred.skip.attempts.to.start.skipping=8\-Dmapred.skip.map.max.skip.records=8\-Dmapred.skip.mode.enabled=tru

hadoop - 5.6 GB 对 Cloudera 来说还不够吗?

我在笔记本电脑和OracleVirtualBoxVM上运行ClouderaHadoop。我已经从我的8核中分配了5.6GB,从八核中分配了6GB。而且我仍然无法保持它的正常运行。即使没有负载服务也不会保持正常运行,当我尝试查询时至少Hive会在20分钟内关闭。有时它们像多米诺骨牌一样倒下:一个接一个。更多的内存似乎对某些人有所帮助:使用3GB和所有服务时,当Hue本身设法启动时,Hue正在闪烁红色。重新启动后,我需要30到60分钟才能使系统启动到足以尝试在其上运行任何东西。有两个明智的注意事项(我设法找到了):-交换警告。-当系统使用26GB的虚拟内存不足时出现崩溃。我的数据集不到一兆

scala - 当我尝试通过 Cloudera VM 在 spark 中运行 scala 命令时,topology.py 出现语法错误

每次我尝试按照Scala命令运行valdataRDD=sc.textFile("hdfs://quickstart.cloudera:8020/user/cloudera/data/data.txt")dataRDD.collect().foreach(println)//ordataRDD.count()我得到以下异常-exitCodeExceptionexitCode=1:File"/etc/hadoop/conf.cloudera.yarn/topology.py",line43printdefault_rack^SyntaxError:Missingparenthesesinc

hadoop - Cloudera 的 CDH4 WordCount hadoop 教程 - 问题

我正在学习本教程:http://www.cloudera.com/content/cloudera-content/cloudera-docs/HadoopTutorial/CDH4/Hadoop-Tutorial/ht_topic_5_2.html内容如下:javac-cpclasspath-dwordcount_classesWordCount.javawhereclasspathis:CDH4-/usr/lib/hadoop/*:/usr/lib/hadoop/client-0.20/*CDH3-/usr/lib/hadoop-0.20/hadoop-0.20.2-cdh3u4-

apache - Cloudera hadoop的conf目录在哪里?

我一直在寻找ClouderaHadoop/conf目录所在的位置,但找不到。我使用Cloudera的一键式软件包存储库安装了namenode,并运行了sudoapt-getinstall-yhadoop-hdfs-namenode,但现在我需要找到code>/conf这样我就可以配置Hadoop集群了。有人知道它在哪里吗? 最佳答案 它在通常的地方,/etc/hadoop/conf。您会发现这实际上是一个使用alternatives的符号链接(symboliclink),但您可以根据需要转到此目录查找/编辑配置。不过,通过Cloud

java - Hive 在创建表 "Cannot validate serde: com.cloudera.hive.serde.JSONSerDe"时抛出错误

正在使用apache-hive-0.13.1。在创建表配置单元时抛出如下错误FAILED:ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.Cannotvalidateserde:com.cloudera.hive.serde.JSONSerDe表结构为createexternaltabletweets(idBigInt,created_atString,scourceString,favoritedBoolean,retweet_countint,retweeted_statusStruct>,e