草庐IT

not_analyzed

全部标签

Hadoop HA 设置 : not able to connect to zookeeper

我正在按照以下文章尝试设置HadoopHA。http://hashprompt.blogspot.in/2015/01/fully-distributed-hadoop-cluster.html配置完成后,当我尝试运行时hdfszkfc-formatZK我收到以下错误。15/03/3012:18:14INFOzookeeper.ZooKeeper:Clientenvironment:java.library.path=/opt/hadoop-2.6.0/lib/native15/03/3012:18:14INFOzookeeper.ZooKeeper:Clientenvironment

hadoop - 错误 terasort.TeraSort : Input path does not exist: maprfs:/user/user01/–DXmx1024m

在通过修改参数运行terasort应用程序时,我收到以下错误。15/05/2421:41:42ERRORterasort.TeraSort:Inputpathdoesnotexist:maprfs:/user/user01/–DXmx1024m我正在运行用于执行慢跑的命令$hadoopjar/opt/mapr/hadoop/hadoop-0.20.2/hadoop-0.20.2-dev-\examples.jarterasort–DXmx1024m–Dmapred.reduce.tasks=2\-Dio.sort.mb=1/user/user01/6/TERA_IN/user/user

java - 安装 "cannot execute not a directory"时出现 Hadoop 错误

出于某些研究目的,我正在尝试在我的本地系统中安装Hadoop2.6.0,但是当我完成我的配置和java安装时,安装停止了。执行命令时遇到错误"hdfsnamenode-format"我得到的错误信息如下"usr/local/hadoop/bin/hdfs:line276:/usr/lib/jvm/java-7-oracle/jre/bin/java/bin/java:Notadirectory/usr/local/hadoop/bin/hdfs:line276:exec:/usr/lib/jvm/java-7-oracle/jre/bin/java/bin/java:cannotexe

scala - 为什么我的 Spark 应用程序无法使用 "object SparkSession is not a member of package"进行编译,但 spark-core 是依赖项?

我是spark开发的新手,正在尝试在redhatlinux环境中使用sbt构建我的第一个spark2(scala)应用程序。以下是环境详细信息。CDHVersion:5.11.0ApacheSpark2:2.1.0.cloudera1ScalaVersion:2.11.11JavaVersion:1.7.0_101申请代码:importorg.apache.spark.sqlimportorg.apache.spark.sql.SparkSessionimportorg.apache.spark.sql.types._importorg.apache.spark.sqlobjectMy

解决Flutter运行报错Could not run build/ios/iphoneos/Runner.app

错误场景更新了IOS的系统版本为最新的17.0,运行报以下错误Launchinglib/main.dartoniPhoneindebugmode...AutomaticallysigningiOSfordevicedeploymentusingspecifieddevelopmentteaminXcodeproject:GN3DCAF71CRunningXcodebuild...Xcodebuilddone.10.3sInstallingandlaunching...Couldnotrunbuild/ios/iphoneos/Runner.appon00008101-000465E821FA0

java - HBase on Tomcat7 安装错误: Could not initialize class org. apache.hadoop.security.ShellBasedUnixGroupsMapping

我正在尝试通过tomcatservlet访问AWSEMR主节点上的HBase。我在tomcatservletget请求上有这段代码:Configurationconf=HBaseConfiguration.create();conf.setInt("timeout",120000);conf.set("hbase.master","*"+hbaseHost+":9000*");conf.set(HBASE_CONFIGURATION_ZOOKEEPER_QUORUM,hbaseZookeeperQuorum);conf.set(HBASE_CONFIGURATION_ZOOKEEPER

java - Hadoop - UnsupportedOperationException : Not implemented by the DistributedFileSystem

当我导出到jar文件并在Hadoop节点上运行时,我在eclipse项目中有以下代码StringhdrsUrl="hdfs://servername:8020";Configurationconf=newConfiguration();conf.set("fs.defaultFS",hdrsUrl);FileSystemfs=FileSystem.get(conf);我收到以下错误15/04/1708:21:43WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin

hadoop - Oozie 作业在运行 hue 时由于 "not org.apache.hadoop.mapred.Mapper"而失败

我正在尝试通过oozie作业运行wordcount程序。当我像hadoopjarwordcoutjar/data.txt/out一样手动运行wordcoutjar时。它运行良好并给我输出。这是我的wordcount程序的映射器代码的详细信息。publicclassMapperWordcountextendsMapper{privatefinalstaticIntWritableone=newIntWritable(1);privateTextword=newText();publicvoidmap(LongWritablekey,Textvalue,Contextcontext)thr

hadoop - 无效的作业 session 异常 : Output directory not set

我正在使用ClouderaVM进行mapreduce实践。我刚刚从cloudera提供的默认wordcount类创建了jar。我在运行mapreduce程序时遇到此错误。我能知道我错过了什么吗?InvalidJobConfException:Outputdirectorynotset.Exceptioninthread"main"org.apache.hadoop.mapred.InvalidJobConfException:Outputdirectorynotset. 最佳答案 要使用MapReduce程序处理数据,您需要-映射器

hadoop - 无法启动 sqoop : jobtracker not found

当我使用sqoop将数据从mysql传输到cassandra时,出现如标题的错误。dsesqoopimport--connectjdbc:mysql:///Turkgen--usernameroot--tablemgs--cassandra-keyspaceturkgen_ks--cassandra-tablemgs--cassandra-thrift-hostlocalhost--cassandra-create-schema我运行这个命令,但我得到了错误:无法启动sqoop:找不到jobtracker编辑:当我查看jobtracker的日志文件时。有这样的错误:不包含有效的主机:端