草庐IT

com-state

全部标签

hadoop - org.apache.hadoop.hdfs.server.common.InconsistentFSStateException : Directory/tmp/hadoop/dfs/name is in an inconsistent state

我正在运行单节点。NameNode总是在启动集群时开始失败。我收到以下错误。2013-06-2910:37:29,968FATALorg.apache.hadoop.hdfs.server.namenode.NameNode:Exceptioninnamenodejoinorg.apache.hadoop.hdfs.server.common.InconsistentFSStateException:Directory/tmp/hadoop/dfs/nameisinaninconsistentstate:storagedirectorydoesnotexistorisnotaccess

Hadoop map 作业因 com.datastax.driver.core.exceptions.NoHostAvailableException 而失败

我正在尝试使用hadoopmap-reduce对存储在cassandra中的数据运行分析。为此,我使用了可通过Maven依赖项cassandra-all获得的类CqlInputFormat。目前我们在生产环境中一直使用这个依赖的2.0.10版本。此外,我们正在使用版本为2.1.1的caassandra-driver-core。现在,当我向我的jobtracker提交一个简单的map-reduce作业时,我的所有映射器任务都会失败,并出现以下异常。这里要注意的另一个重要事项是,如果我使用cassandra-all2.0.6中可用的CqlPagingInputFormat,一切正常。但是这

hadoop - 创建外部表时Hive报错(state=08S01,code=1)

我试图在Hive中创建一个外部表,但不断收到以下错误:createexternaltablefoobar(aSTRING,bSTRING)rowformatdelimitedfieldsterminatedby"\t"storedastextfilelocation"/tmp/hive_test_1375711405.45852.txt";Error:Errorwhileprocessingstatement:FAILED:ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask(state=08S01,c

java - Hive 在创建表 "Cannot validate serde: com.cloudera.hive.serde.JSONSerDe"时抛出错误

正在使用apache-hive-0.13.1。在创建表配置单元时抛出如下错误FAILED:ExecutionError,returncode1fromorg.apache.hadoop.hive.ql.exec.DDLTask.Cannotvalidateserde:com.cloudera.hive.serde.JSONSerDe表结构为createexternaltabletweets(idBigInt,created_atString,scourceString,favoritedBoolean,retweet_countint,retweeted_statusStruct>,e

hadoop - hdfs数据目录 "is in an inconsistent state: is incompatible with others."

对不起,这让我很紧张......就在我开始通过配置单元加载表时,我开始收到此错误。亲爱的老谷歌也帮不上忙。我的情况-单节点设置。名称节点正常工作。datanode启动失败并显示此消息-ERRORdatanode.DataNode:org.apache.hadoop.hdfs.server.common.InconsistentFSStateException:Directory/xxxxxx/hadoop/hdfs-data-dirisinaninconsistentstate:isincompatiblewithothers.我已经尝试过重新格式化我的名称节点,但没有用。此外,我试图

hadoop - 将 Hadoop+Hive 与 AWS EMR 上的 MongoDB 连接(找不到类 com/mongodb/DBObject)

我喜欢通过MongoDB连接(而不是通过BSON转储)将EMR集群连接到我们的MongoDB。为此,我通过AWS管理控制台生成了集群。在Bootstrap配置中,我指向了这个位于S3上的文件:#!/bin/shwget-P/home/hadoop/libhttp://central.maven.org/maven2/org/mongodb/mongo-java-driver/2.13.0/mongo-java-driver-2.13.0.jarwget-P/home/hadoop/libhttps://github.com/mongodb/mongo-hadoop/releases/d

hadoop - IllegalArgumentException 必须指定 bucketName 参数。 com.amazonaws.services.s3.AmazonS3Client.rejectNull

使用(hfs-textline)在AWS-EMR集群上运行Clojurejar并获取:IllegalArgumentExceptionThebucketNameparametermustbespecified.com.amazonaws.services.s3.AmazonS3Client.rejectNull`. 最佳答案 在我的例子中,它确实是关于bucketname的。我输错了s3:///mkay4242(3个斜线)而不是s3://mkay4242。 关于hadoop-Illega

hadoop - 使用 Yarn 运行 spark 作业时出现错误 :com. google.common.util.concurrent.Futures.withFallback

我正在尝试使用yarn运行spark作业,但出现以下错误java.lang.NoSuchMethodError:com.google.common.util.concurrent.Futures.withFallback(Lcom/google/common/util/concurrent/ListenableFuture;Lcom/google/common/util/concurrent/FutureFallback;Ljava/util/concurrent/Executor;)Lcom/google/common/util/concurrent/ListenableFuture

hadoop - Impala 找不到 com.mysql.jdbc.Driver

我正在尝试在RedHat5上以伪分布式模式使用CDH4设置ClouderaImpala。我让Hive使用JDBC连接到MySQL元存储,但我在使用JDBC设置Impala时遇到了问题。我一直按照此处的说明进行操作:http://www.cloudera.com/content/cloudera-content/cloudera-docs/Impala/latest/Installing-and-Using-Impala/ciiu_impala_jdbc.html我已将JAR提取到一个目录中,并将该目录包含在$CLASSPATH中。我还在$CLASSPATH中包含了/usr/lib/hi

php - 探索 PHP 中的 COM 对象

分解COM对象以进行调试的正确方法是什么?我有一个返回多级对象的第3方函数。该文档不存在,因此我希望能够从对象中回显所有内容或在KomodoIDE中对其进行调试。Komodo只说Object,没有别的。也许转换为数组?我知道一些现有的选项,例如$com->Status,但是返回了更多的变量,我想知道它们是什么。 最佳答案 您可以使用com_print_typeinfo()而不是var_dump()。这应该适用于COM、VARIANT和DOTNET对象。输出看起来类似于:classIFile{/*GUID={C7C3F5A4-88A3