草庐IT

vmware-ubuntu

全部标签

ubuntu - Hadoop:文件...只能复制到 0 个节点,而不是 1 个

这是我的错误信息。~/hadoop-1.0.3/data$hadoopfs-copyFromLocalREADME.txt/input/wex~/hadoop-1.0.3/data$hadoopfs-copyFromLocalRandomString.txt/input/wex~/hadoop-1.0.3/data$hadoopfs-copyFromLocal2M.TITLE.ID/input/wex~/hadoop-1.0.3/data$hadoopfs-copyFromLocal2M.SRCID.DSTID/input/wex~/hadoop-1.0.3/data$hadoopfs

hadoop - ubuntu 14.04/64b 安装cloudera manager

我正在我的系统(14.04/64b)中安装ClouderaManager。在最后一步安装时,在完成安装之前我在验证中遇到了一些错误,如下所示,上面页面的错误是,错误1个别主机正确解析了自己的主机名。主机localhost应具有名称localhost但将(InetAddress.getLocalHost().getHostName())本身解析为arul-pc。错误2检查/etc/hosts时发现以下错误...主机名localhost不是地址127.0.0.1的第一个匹配项在本地主机上的/etc/hosts中。相反,arul-pc是第一个匹配项。这FQDN必须是相应IP的/etc/hos

hadoop - Hortonwork 在 vmware 中安装后无法与浏览器连接

我已经在vmware中成功安装了hortonworks沙箱,最后我得到了这个vmware的屏幕截图但是我在浏览器中尝试了ipaddress但出现以下错误。Thissitecan’tbereached192.168.247.135tooktoolongtorespond.Try:ReloadingthepageCheckingtheconnectionCheckingtheproxyandthefirewallERR_CONNECTION_TIMED_OUT 最佳答案 要从Putty或浏览器访问Hortornworks沙盒,您必须在网

ubuntu - hadoop-1.2.1 namenode未格式化

我已经在Ubuntu16上安装了hadoop1.2.1,配置如下:核心站点.xmlfs.default.namehdfs://localhost:8020hadoop.tmp.dirtmpDir/snadikop/hadoopdatahdfs-site.xmldfs.replication1mapred-site.xmlmapred.job.trackerlocalhost:8021当我第一次启动时,一切正常。但是当我重新启动系统时,当我尝试启动守护进程时,namenode没有启动。尝试过hadoopnamenode-format命令并尝试过sudochownsnadikoptmpDi

ubuntu - “ubuntu” 用户的 Hadoop start-dfs.sh 权限被拒绝

我正在尝试在Amazonaws上设置一个4节点集群。所有安装、设置和配置都已完成,但在执行“start-dfs.sh”命令时遇到问题。错误信息如下:Startingnamenodeson[ec2-13-126-215-231.ap-south-1.compute.amazonaws.com]ec2-13-126-215-231.ap-south-1.compute.amazonaws.com:Permissiondenied(publickey).datanode2:startingdatanode,loggingto/usr/local/hadoop/logs/hadoop-ubun

ubuntu - 从 Pyspark 访问 HDFS 失败

我已经在Ubuntu17.04上安装了Hadoop2.7.3和pyspark2.2.0。Hadoop和Pyspark似乎都可以独立运行。但是,我没有设法从Pyspark中的HDFS获取文件。当我尝试从HDFS获取文件时,出现以下错误:https://imgur.com/j6Dy2u7我在另一篇文章中看到,需要设置环境变量HADOOP_CONF_DIR才能访问HDFS。我也这样做了(见下一个屏幕截图),但随后出现另一个错误,Pyspark不再工作。https://imgur.com/AMpJ6TB如果我删除环境变量,一切都像以前一样。如何解决在Pyspark中从HDFS打开文件的问题?我

ubuntu - 设置hadoop 3.2.0 伪分发运行报错

作为hadoop的新手,我按照链接中的文档在我的ubuntu上成功安装了hadoop3.2.0https://hadoop.apache.org/docs/r3.2.0/hadoop-project-dist/hadoop-common/SingleCluster.html.但是,我在执行某些导致伪分布式操作部分中的示例的执行过程时遇到问题。当我运行此代码时$bin/hdfsdfs-mkdirinput我似乎收到以下错误mkdir:`hdfs://localhost:9000/user/hadoop3':Nosuchfileordirectory我不确定如何从这里开始。请协助。谢谢

ubuntu - 安装hadoop时如何修复 "Error: Could not find or load main class ” -Djava.library.path=.usr.local.hadoop.lib”

我正在尝试在Ubuntu上安装Hadoop2.9.2。我在~/.bashrc和env.sh文件中设置了相同的JAVA_HOME路径。在hadoop_store下使用正确的路径为数据节点和名称节点创建了两个单独的目录。Java版本是“java-11-openjdk-amd64”。在hadoop文件系统中格式化namenode时,我仍然面临错误。请帮助我解决它。指向我一直遵循其说明的页面的链接。https://www.digitalvidya.com/blog/install-hadoop-on-ubuntu-and-run-your-first-mapreduce-program/这是错

Hadoop 设置 ubuntu 名称节点,数据节点不工作-jps

我试图在我的电脑上使用Ubuntu12.10设置Hadoop单节点集群。引用tutorialonMichael-noll.com一切都很顺利,直到我执行了“/usr/local/hadoop/bin/start-all.sh”命令之后我执行了javaprocessstatus"/usr/local/hadoop$jps"然后我发现没有列出DataNode、TaskTracker、NameNode(即不工作)有人能在这种情况下提供帮助吗? 最佳答案 重置您的core-site.xml文件hadoop.tmp.dir/home/rlk/

hadoop - 用户登录时从 Ubuntu 中删除用户

我正在使用Ubuntu12.04。最近我下载了Hadoop2.0.3并创建了一个名为Hduser的用户,我添加了该用户并授予了特权。现在我想删除用户。我用过sudodeluserhduser但它给了我以下错误:Warning:grouphadoop'hasnomoremembers.userdel:userhduseriscurrentlyloggedin/usr/sbin/deluser:/usr/sbin/userdelhduser'returnederrorcode8.Exiting 最佳答案 在执行上述操作之前尝试以root