草庐IT

ssh2-sftp

全部标签

hadoop - 无法通过 ssh 进入 Elastic MapReduce

我正在使用elastic-mapreduce从命令行创建新集群。看完this教程,我有:elastic-mapreduce--create--alive\--instance-typem1.xlarge\--num-instances5\--supported-productmapr\--namem7\--args"--edition,m7"将创建一个具有6个节点(1个主节点+5个从节点)的新集群。所以我尝试通过ssh进入master:elastic-mapreduce--jobflowj-3FLVMX9CYE5L6--ssh然后我得到Permissiondenied(publicke

hadoop - 在 hadoop 多集群中更改 ssh 默认端口

关闭。这个问题不符合StackOverflowguidelines.它目前不接受答案。这个问题似乎不是关于aspecificprogrammingproblem,asoftwarealgorithm,orsoftwaretoolsprimarilyusedbyprogrammers的.如果您认为这个问题是关于anotherStackExchangesite的主题,您可以发表评论,说明问题可能在哪里得到解答。关闭6年前。Improvethisquestion我的Hadoop多节点集群有3个节点,一个名称节点和两个数据节点,我正在使用Hbase存储数据,由于某些原因我想更改默认的ssh端口

linux - SSh:拒绝连接到本地主机

我想在ubuntu上安装hadoop我正在学习本教程:RunningHadooponUbuntuLinux但是我在sshlocalhost这一步遇到了问题hduser@r:~$ssh-vvvlocalhost-p8047OpenSSH_6.2p2Ubuntu-6ubuntu0.1,OpenSSL1.0.1e11Feb2013debug1:Readingconfigurationdata/etc/ssh/ssh_configdebug1:/etc/ssh/ssh_configline19:Applyingoptionsfor*debug2:ssh_connect:needpriv0deb

configuration - 设置 hadoop 时 SSH 出现问题

我是hadoop的新手。我在计算机上安装了Ubuntu12.10,我想在单个节点上以伪分布式模式安装Hadoop。我搜索并获得了很多教程,但我遇到了SSH问题。我按照教程说的做了。我确定问题出在SSH上。我得到了openssh-server,并且这样做了:hadoop00@WebsoftStation:~$ssh-keygen-tdsa-P""-f~/.ssh/id_dsahadoop00@WebsoftStation:~/.ssh$cat~/.ssh/id_dsa.pub>>authorized_keys然后我可以像这样成功地通过ssh我的本地主机:hadoop00@WebsoftS

ssh - 如何通过 java 的 hdfs 协议(protocol)访问 hadoop?

我找到了一种通过hftp连接到hadoop的方法,它工作正常,(只读):uri="hftp://172.16.xxx.xxx:50070/";System.out.println("uri:"+uri);Configurationconf=newConfiguration();FileSystemfs=FileSystem.get(URI.create(uri),conf);fs.printStatistics();但是,我想读/写以及复制文件,也就是说,我想通过hdfs连接。如何启用hdfs连接以便我可以编辑实际的远程文件系统?我试图从hftp->hdfs更改上面的协议(protoc

windows-7 - 使用 cygwin 为 hadoop 安装 ssh

在我解释我遇到的问题之前,需要让您知道我对CYGWIN和类似的东西是全新的。我使用CYGWIN安装SSH的目的是在Windows7x64机器上设置Hadoop。我正在尝试执行https://gist.github.com/tariqmislam/2159173上给出的步骤.但是我无法提供空白密码。以下是相同的日志。任何帮助将不胜感激。$chmod+r/etc/密码$chmodu+w/etc/密码$chmod+r/etc/组$chmodu+w/etc/组$chmod755/变量$touch/var/log/sshd.log$chmod664/var/log/sshd.log$ssh主机配

hadoop - 使用 SFTP 将文件移动到 Hadoop HDFS

我有一个VPC子网,其中有多台机器。在机器上,我存储了一些文件。在另一台机器上,我安装并运行了hadoopHDFS服务。我需要使用SFTP将这些文件从第一台机器移动到HDFS文件系统。Hadoop有一些API可以实现这个目标吗?PS:我使用ClouderaCDH4发行版安装了Hadoop。 最佳答案 这是一个在ftp/sftp服务器端比HDFS更容易实现的要求。查看在HDFS上运行的ftp服务器hdfs-over-ftp 关于hadoop-使用SFTP将文件移动到HadoopHDFS,我

hadoop - 如何配置hadoop使用非默认端口: "0.0.0.0: ssh: connect to host 0.0.0.0 port 22: Connection refused"

当我运行start-dfs时,出现以下错误,看起来我需要告诉hadoop使用不同的端口,因为这是我通过ssh进入本地主机时所需要的。换句话说,以下操作成功:ssh-p2020localhost.[WedJan0616:57:34root@~]#start-dfs.sh16/01/0616:57:53WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicableStartingnamenodeson[localhost]l

php - 通过 PHP (phpseclib) 上传文件到 SFTP 服务器

我有要上传到SFTP服务器中“传入”文件夹的CSV。我正在使用phpseclib来执行此操作。连接已经存在,但它不输出任何内容。我不确定我所做的是否正确,因为我之前没有处理过SFTP。这是我的代码的样子:$file="leads.csv";$server="41.160.150.200";//$server="ft.bayport.co.za";$port="22";$username="";$password="";//usernameandpasswordremovedforsecurityreasonsset_include_path(get_include_path().PAT

PHP ssh2_auth_pubkey_file() : Authentication failed using public key: Invalid key data, 不是 base64 编码

在PHP5.3.3中(在CentOS和apache2上)我试图通过php脚本连接到SFTP。代码从构造函数中获取key和服务器详细信息function__construct(){$this->host='servername.loc';$this->port=SFTP_PORT;$this->auth_user='username';$this->auth_pub='/data/home/username/.ssh/id_rsa.pub';$this->auth_priv='/data/home/username/.ssh/id_rsa';$this->auth_pass=null;$