草庐IT

command-line-options

全部标签

hadoop - 开始-dfs.sh : command not found on ubuntu 12. 04

我已经安装了hadoop2.2.0。在Ubuntu12.04上。但是命令start-dfs.sh不起作用。当我运行此命令时,它返回start-dfs.sh:commandnotfound。start-dfs.sh、start-all.sh、stop-dfs.sh和stop-all.sh位于sbin目录中。可能是什么问题? 最佳答案 第一个解决方案设置Hadoop环境变量$cd~$vi.bashrc pastefollowingtotheendofthefile #HadoopvariablesexportJAVA_HOME=/usr

hadoop - --options-file 与 --connection-param-file 有何不同

Sqoop文档将--options-file的示例显示为:##OptionsfileforSqoopimport##Specifiesthetoolbeinginvokedimport#Connectparameterandvalue--connectjdbc:mysql://localhost/db#Usernameparameterandvalue--usernamefoo##Remainingoptionsshouldbespecifiedinthecommandline.#按照上面的说法,如果它只是连接信息,并且按照注释,所有剩余的选项都应该在命令行中指定,为什么它在--opt

java - HBase内部是如何解析 "hbase shell command"的?

假设,我在hbaseshell中运行get't1','r1'命令,HBase内部如何分析并执行这个命令? 最佳答案 这是一个jruby脚本。这是在一组shell命令下定义的。IamquotingherejavaHashMapasanexampleforbetterunderstanding..在插入时,您的rowkey就像javaHashMap中的键,它将存储在其中一个区域服务器中(在HashMap情况下,这些是均匀分布的桶..)在取回该行时,它使用rowkey,它将定位特定的区域服务器并从您提到的表中获取该服务器的值。That's

Hadoop Kerberos : hdfs command 'Failed to find any Kerberos tgt' even though I had got one ticket using kinit

我为Hadoop集群设置了Kerberos身份验证。当我尝试使用kinit获取kerberos票证时,它将票证存储在krb5cc_0中$sudoklistTicketcache:FILE:/tmp/krb5cc_0Defaultprincipal:hduser/stwhdrm01@FDATA.COMValidstartingExpiresServiceprincipal01/04/201810:15:1401/05/201810:15:14krbtgt/FDATA.COM@FDATA.COM但是当我尝试在命令行上列出HDFS目录时,出现以下错误:$hdfsdfs-ls/openjdkv

hadoop - PIG 拉丁语 : While loading how to discard the first line in any file?

我从一段时间以来一直在使用PIG,想知道如何在加载文件时不考虑第一行。我有一个包含标题的文件。所以我应该忽略第一行并转到下一行对日期列和所有列进行处理。如何解决这个问题?谢谢 最佳答案 如果你有pig版本0.11,你可以试试这个:input_file=load'input'USINGPigStorage(',')as(row1:chararay,row2:chararray);ranked=rankinput_file;NoHeader=Filterrankedby(rank_input_file>1);New_input_file

安装后 Hadoop 格式化 NameNode - 错误 : command not found (UBUNTO)

你好,我刚刚安装了Hadoop,但无法格式化namenode我正在和Ubunto一起工作它应该很简单但是我得到这个错误:“找不到命令”barak@barak-VirtualBox:/usr/local/hadoop/hadoop-common-project/hadoop-common/src/main/bin$ls-ltrtotal76-rwxr-xr-x1rootroot1462223:08stop-all.sh-rw-r--r--1rootroot1770223:08stop-all.cmd-rwxr-xr-x1rootroot1471223:08start-all.sh-rw-

java.sql.SQLException : Unknown system variable 'OPTION' 异常

我正在使用Ambari服务器安装MYSQL,以便在ubuntu上安装hadoop。我从Xampp安装了MySql,并且工作正常。MySQL5.6版本去掉了set`Option关键字,mariaDB(xampp自带)与之一致。网站显示兼容MySQL5.6版本,应该没问题。回应theonlyrelevantlinkIfound,当我检查我的sql版本时:mysql-vTheprogram'mysql'canbefoundinthefollowingpackages:*mysql-client-core-5.6*mariadb-client-core-10.0这就是我得到的。我相信链接中提到

hadoop - 映射减少 : Passing external jar files using libjars option does not work

我的mapreduce程序需要外部jar文件。我正在使用“-libjars”选项提供那些外部jar文件-我使用了hadoop提供的Tool、Configured和ToolRunnerUtilities。publicstaticvoidmain(String[]args)throwsException{intres=ToolRunner.run(newConfiguration(),newMapReduce(),args);System.exit(res);}@Overridepublicintrun(String[]args)throwsException{//Configuratio

hadoop - 无法运行 hadoop 流作业 : Missing required options: input, 输出

我正在尝试在DSE3.1分析服务器集群上运行流媒体作业。我正在使用CassandraCF进行输入。但它提示输入和输出参数,但它们已设置(我设置它只是因为提示):dsehadoopjar$HADOOP_HOME/lib/hadoop-streaming-1.0.4.8.jar\-Dcassandra.input.keyspace="tmp_ks"\-Dcassandra.input.partitioner.class="MurMur3Partitioner"\-Dcassandra.input.columnfamily="tmp_cf"\-Dcassandra.consistencyle

java - 在 hadoop 安装期间尝试执行命令 "hdfs: command not found"时出现 "hdfs namenode -format"

完整的错误陈述:Nocommand'hdfs'found,didyoumean:Command'hfs'frompackage'hfsutils-tcltk'(universe)Command'hdfls'frompackage'hdf4-tools'(universe)hdfs:commandnotfound 最佳答案 您的HDFS安装可能有问题,请尝试在命令中提供hdfs的完整路径。/path/to/dir/hdfsnamenode-format路径取决于您的操作系统和您使用的hadoop发行版等。使用locate或find。如