草庐IT

single-version-externally-managed

全部标签

hadoop - Cloudera 经理。未能检测到 Cloudera Manager Server

我有两台装有CentOS6.5的PCclient86-101.aihs.net80.94.86.101client86-103.aihs.net80.94.86.103cloudera-manager-server安装在client86-101.aihs.net上。我在检测ClouderaManagerServer时遇到问题(集群安装的第3步。)问题跟踪:BEGINhost-tPTR80.94.86.101101.86.94.80.in-addr.arpadomainnamepointerclient86-101.aihs.net.END(0)usingclient86-101.aih

java - 找不到 hive-hwi-<version>.war 文件

我无法按照描述启动HiveWeb界面here.这是hive--servicehwi的输出:ls:cannotaccess/usr/local/hive/lib/hive-hwi-*.war:Nosuchfileordirectory14/09/0913:07:59INFOhwi.HWIServer:HWIisstartingup14/09/0913:08:00FATALhwi.HWIServer:HWIWARfilenotfoundat/usr/local/hive/lib/hive-hwi-0.13.1.war看来/usr/local/hive/lib下没有.war文件!!!我应该生

maven - Flink 错误 - org.apache.hadoop.ipc.RemoteException : Server IPC version 9 cannot communicate with client version 4

我正在尝试使用来自HDFS的文件运行flink作业。我创建了一个数据集如下-DataSource>visits=env.readHadoopFile(newTextInputFormat(),LongWritable.class,Text.class,Config.pathToVisits());我使用的是flink的最新版本——0.9.0-milestone-1-hadoop1(我也尝试过0.9.0-milestone-1)而我的Hadoop版本是2.6.0但是,当我尝试执行作业时出现以下异常。我搜索了类似的问题,它与客户端和hdfs之间的版本不兼容有关。Exceptioninthr

hadoop - 定位 Cloudera Manager HDFS 配置文件

我已经通过ClouderaManager安装了一个集群,现在我需要手动启动集群。我一直在使用以下命令:$sudo-uhdfshadoopnamenode/datanode/jobtracker但是dfs.name.dir被设置为/tmp。我似乎找不到cloudera管理器在哪里有HDFS配置文件。/usr/lib/hadoop-02*/conf中的那些似乎是最小的。他们缺少dfs.name.dir,这是我特别要找的。顺便说一下,我在RHLE6系统上。由于懒惰,我虽然可以只复制cloudera管理器的HDFS配置文件,所以我不必手动创建它们,将它们复制到6个节点:)谢谢

hadoop - 运行 "hadoop version"命令时,Cygwin 上 Hadoop 中的 CLASSPATH 问题

我已经使用Cygwin终端从Apache安装了Hadoop2.1beta版在Windows上。运行命令hadoopversion得到这个错误:Error:Couldnotfindorloadmainclassorg.apache.hadoop.util.VersionInfo 最佳答案 您还可以将以下内容添加到您的~/.bashrcexportHADOOP_CLASSPATH=$(cygpath-pw$(hadoopclasspath)):$HADOOP_CLASSPATH这帮我解决了

hadoop - "Got error creating database manager"- sqoop 导入查询出错

场景:我正在尝试从sqlserver导入到HDFS,但出现以下错误:错误:hadoop@ubuntu:~/sqoop-1.1.0/bin$./sqoopimport--connect'jdbc:sqlserver://192.168.230.1;username=xxx;password=xxxxx;database=HadoopTest'--tablePersonInfo--target-dir/home/hadoop/hadoop-0.21.0/11/12/1012:13:20ERRORtool.BaseSqoopTool:Goterrorcreatingdatabasemanag

memory-management - HBase MemStore 和垃圾收集

我是HBase的新手,但我已经设置好HBase和Hadoop并了解一些相关知识。当我研究HBaseMemStore时,我对MemStore的全部了解是“MemStore是HBase放置必须写入或读取的数据的内存位置”。所以,这就是为什么我们想在何时何地阅读有关memstore的内容时,我们也会看到有关垃圾收集的讨论。现在我的问题是,memstore的唯一目的是在内存中保存可读和可写的数据吗?我们可以调整该内存的大小以获得hbase的快速回复吗?垃圾收集配置(收集器配置)会影响内存库吗?我认为应该是的。:) 最佳答案 关于HbaseM

Apache 配置单元错误 Merging of credentials not supported in this version of hadoop

我正在使用hadoop1.2.1、hbase0.94.14和hive1.0.0。我的集群中有三个数据节点,还有三个区域服务器。我必须将一些数据从hbase导入到配置单元。我已经成功配置了配置单元,但是当我运行一个命令来计数时。hive表中的行,它给出以下内容ERROR[main]:exec.Task(SessionState.java:printError(833))-JobSubmissionfailedwithexception'java.lang.RuntimeException(java.io.IOException:Mergingofcredentialsnotsupport

hadoop - 在没有cloudera manager的情况下安装cloudera impala

请提供在没有cloudera管理器的情况下在ubuntu中安装imapala的链接。无法使用官方链接安装。无法使用这些查询定位包impala:sudoapt-getinstallimpala#Binariesfordaemonssudoapt-getinstallimpala-server#Servicestart/stopscriptsudoapt-getinstallimpala-state-store#Servicestart/stopscript 最佳答案 首先你需要获取包列表并将其存储在/etc/apt/sources.l

hadoop - pig 到 hadoop 问题 : Server IPC version 7 cannot communicate with client version 4

我试图让pig开始但失败了:$pig2013-05-1018:03:22,972[main]INFOorg.apache.pig.Main-ApachePigversion0.11.1(r1459641)compiledMar222013,02:13:532013-05-1018:03:22,972[main]INFOorg.apache.pig.Main-Loggingerrormessagesto:/Users/barclaydunn/Environment/pig-0.11.1/pig_1368223402970.log2013-05-1018:03:23,151[main]IN