草庐IT

[hadoop全分布部署]虚拟机Hadoop集群配置/etc/hosts、配置无密码登录（SSH）

发量不足 2023-04-22 原文

👨‍🎓👨‍🎓博主：发量不足

个人简介：耐心，自信来源于你强大的思想和知识基础！！

📑📑本期更新内容：虚拟机Hadoop集群配置/etc/hosts、配置无密码登录（SSH）🔥🔥

📑📑下篇文章预告：虚拟机Hadoop集群交换 SSH 密钥🔥🔥

目录

配置/etc/hosts、配置无密码登录（SSH）

一、生成SSH密钥

（1）改IP地址、改MAC地址、改主机名

（2）master、slave1、slave2相同操作

（3）查看有无安装opensshd和rsyncl两个服务

（4）master、slave1、slave2都切换用户

（5）生成密钥（master、slave1、slave2统一操作先操作master）

（6）查看 ~/.ssh文件下是否有两个刚生产的无密码密钥对

（7） 将 id_rsa.pub 追加到授权 key 文件中

（8）修改文件"authorized_keys"权限（master、slave1、slave2统一操作）

（9）配置 SSH 服务、重启 SSH 服务（master、slave1、slave2统一操作）

（10） 切换到 hadoop 用户，验证 SSH 登录本机

 

配置/etc/hosts、配置无密码登录（SSH）

一、生成SSH密钥

##复制一份虚拟机进行配置以免后期出现错误

 

 

 

（1）改IP地址、改MAC地址、改主机名

vi /etc/sysconfig/network-scripts/ifcfg-ens33

192.168.196.101对应 master

192.168.196.102对应 slave1

192.168.196.103 对应slave2 

 

  

       

 

改（每台虚拟机对应的）MAC地址

第一台虚拟机  hostnamectl set-hostname master

第二台虚拟机  hostnamectl set-hostname slave1

第三台虚拟机  hostnamectl set-hostname slave2

 

（2）master、slave1、slave2相同操作

在vi /etc/hosts 插入

 

192.168.196.101 master

192.168.196.102 slave1

192.168.196.103 slave2

 

保存退出然后重启

 

 

reboot（重启）

连上CRT

（3）查看有无安装opensshd和rsyncl两个服务

  (master、slave1、slave2统一操作)

  rpm -qa | grep openssh

  rpm -qa | grep rsync

 

 

如果没有安装需要自己安装，rpm查到就不用安装

yum install -y openssh 或yum install -y rsync

（4）master、slave1、slave2都切换用户

   su – hadoop

（5）生成密钥（master、slave1、slave2统一操作先操作master）

   ssh-keygen -t rsa -P ''（回车）

（6）查看 ~/.ssh文件下是否有两个刚生产的无密码密钥对

（master、slave1、slave2统一操作）

  cd ~/.ssh → ll（查看）

（7） 将 id_rsa.pub 追加到授权 key 文件中

（master、slave1、slave2统一操作）

  cat ~/.ssh/id_rsa.pub >>~/.ssh/authorized_keys → ll（查看）

（8）修改文件"authorized_keys"权限（master、slave1、slave2统一操作）

   chmod 600 ~/.ssh/authorized_keys  → ll（查看）

 

（9）配置 SSH 服务、重启 SSH 服务（master、slave1、slave2统一操作）

   su - root

   vi /etc/ssh/sshd_config

   把#PubkeyAuthentication yes前面的#去掉

 

  重新启动ssh 

  systemctl restart sshd

 

 

（10） 切换到 hadoop 用户，验证 SSH 登录本机

首次登录时会提示系统无法确认 host 主机的真实性，只知道它的公钥指纹，询问用户 是否还想继续连接。需要输入“yes”，表示继续登录。第二次再登录同一个主机，则不会再 出现该提示，可以直接进行登录。

  su - hadoop

   不需要密码

  ssh localhost

 

 

hadoopstrongmargin-leftmarginlinux服务器运维

有关[hadoop全分布部署]虚拟机Hadoop集群配置/etc/hosts、配置无密码登录（SSH）的更多相关文章

  1. ruby-on-rails - 独立 ruby​​ 脚本的配置文件 - 2

    我有一个在Linux服务器上运行的ruby​​脚本。它不使用rails或任何东西。它基本上是一个命令行ruby​​脚本，可以像这样传递参数:./ruby_script.rbarg1arg2如何将参数抽象到配置文件(例如yaml文件或其他文件)中？您能否举例说明如何做到这一点？提前谢谢你。 最佳答案 首先，您可以运行一个写入YAML配置文件的独立脚本:require"yaml"File.write("path_to_yaml_file",[arg1,arg2].to_yaml)然后，在您的应用中阅读它:require"yaml"arg

  2. ruby - Capistrano 3 在任务中更改 ssh_options - 2

    我尝试使用不同的ssh_options在同一阶段运行capistranov.3任务。我的production.rb说:set:stage,:productionset:user,'deploy'set:ssh_options,{user:'deploy'}通过此配置，capistrano与用户deploy连接，这对于其余的任务是正确的。但是我需要将它连接到服务器中配置良好的an_other_user以完成一项特定任务。然后我的食谱说:...taskswithoriginaluser...task:my_task_with_an_other_userdoset:user,'an_othe

  3. Ruby Sinatra 配置用于生产和开发 - 2

    我已经在Sinatra上创建了应用程序，它代表了一个简单的API。我想在生产和开发上进行部署。我想在部署时选择，是开发还是生产，一些方法的逻辑应该改变，这取决于部署类型。是否有任何想法，如何完成以及解决此问题的一些示例。例子:我有代码get'/api/test'doreturn"Itisdev"end但是在部署到生产环境之后我想在运行/api/test之后看到ItisPROD如何实现？ 最佳答案 根据SinatraDocumentation:EnvironmentscanbesetthroughtheRACK_ENVenvironm

  4. ruby-on-rails - 每次我尝试部署时，我都会得到 - (gcloud.preview.app.deploy) 错误响应 : [4] DEADLINE_EXCEEDED - 2

    我是Google云的新手，我正在尝试对其进行首次部署。我的第一个部署是RubyonRails项目。我基本上是在关注thisguideinthegoogleclouddocumentation.唯一的区别是我使用的是我自己的项目，而不是他们提供的“helloworld”项目。这是我的app.yaml文件runtime:customvm:trueentrypoint:bundleexecrackup-p8080-Eproductionconfig.ruresources:cpu:0.5memory_gb:1.3disk_size_gb:10当我转到我的项目目录并运行gcloudprevie

  5. ruby - 分布式事务和队列，ruby，erlang，scala - 2

    我有一个涉及多台机器、消息队列和事务的问题。因此，例如用户点击网页，点击将消息发送到另一台机器，该机器将付款添加到用户的帐户。每秒可能有数千次点击。事务的所有方面都应该是容错的。我以前从未遇到过这样的事情，但一些阅读表明这是一个众所周知的问题。所以我的问题。我假设安全的方法是使用两阶段提交，但协议(protocol)是阻塞的，所以我不会获得所需的性能，我是否正确？我通常写Ruby，但似乎Redis之类的数据库和Rescue、RabbitMQ等消息队列系统对我的帮助不大——即使我实现某种两阶段提交，如果Redis崩溃，数据也会丢失，因为它本质上只是内存。所有这些让我开始关注erlang和

  6. ruby-on-rails - Ruby on Rails 可以部署在 Azure 网站上吗？ - 2

    我可以在Azure网站上部署RubyonRails吗？ 最佳答案 还没有。目前仅支持.NET和PHP。 关于ruby-on-rails-RubyonRails可以部署在Azure网站上吗？，我们在StackOverflow上找到一个类似的问题： https://stackoverflow.com/questions/12964010/

  7. Vscode+Cmake配置并运行opencv环境(Windows和Ubuntu大同小异) - 2

    之前在培训新生的时候，windows环境下配置opencv环境一直教的都是网上主流的vsstudio配置属性表，但是这个似乎对新生来说难度略高(虽然个人觉得完全是他们自己的问题)，加之暑假之后对cmake实在是爱不释手，且这样配置确实十分简单(其实都不需要配置)，故斗胆妄言vscode下配置CV之法。其实极为简单，图比较多所以很长。如果你看此文还配不好，你应该思考一下是不是自己的问题。闲话少说，直接开始。0.CMkae简介有的人到大二了都不知道cmake是什么，我不说是谁。CMake是一个开源免费并且跨平台的构建工具，可以用简单的语句来描述所有平台的编译过程。它能够根据当前所在平台输出对应的m

  8. jenkins部署1--jenkins+gitee持续集成 - 2

    前置步骤我们都操作完了，这篇开始介绍jenkins的集成。话不多说，看操作1、登录进入jenkins后会让你选择安装插件，选择第一个默认的就行。安装完成后设置账号密码，重新登录。2、配置JDK和Git都需要执行路径，所以需要先把执行路径找到，先进入服务器的docker容器，2.1JDK的路径root@69eef9ee86cf:/usr/bin#echo$JAVA_HOME/usr/local/openjdk-82.2Git的路径root@69eef9ee86cf:/#whichgit/usr/bin/git3、先配置JDK和Git。点击：ManageJenkins>>GlobalToolCon

  9. 深度学习部署：Windows安装pycocotools报错解决方法 - 2

    深度学习部署：Windows安装pycocotools报错解决方法1.pycocotools库的简介2.pycocotools安装的坑3.解决办法更多Ai资讯：公主号AiCharm本系列是作者在跑一些深度学习实例时，遇到的各种各样的问题及解决办法，希望能够帮助到大家。ERROR:Commanderroredoutwithexitstatus1:'D:\Anaconda3\python.exe'-u-c'importsys,setuptools,tokenize;sys.argv[0]='"'"'C:\\Users\\46653\\AppData\\Local\\Temp\\pip-instal

  10. 在VMware16虚拟机安装Ubuntu详细教程 - 2

    在VMware16.2.4安装Ubuntu一、安装VMware1.打开VMwareWorkstationPro官网，点击即可进入。2.进入后向下滑动找到Workstation16ProforWindows，点击立即下载。3.下载完成，文件大小615MB，如下图：4.鼠标右击，以管理员身份运行。5.点击下一步6.勾选条款，点击下一步7.先勾选，再点击下一步8.去掉勾选，点击下一步9.点击下一步10.点击安装11.点击许可证12.在百度上搜索VM16许可证，复制填入，然后点击输入即可，亲测有效。13.点击完成14.重启系统，点击是15.双击VMwareWorkstationPro图标，进入虚拟机主

随机推荐