设为首页 收藏本站
查看: 892|回复: 0

[经验分享] Linux:实现Hadoop集群Master无密码登录(SSH)各个子节点

[复制链接]

尚未签到

发表于 2017-6-23 10:08:37 | 显示全部楼层 |阅读模式
  以下所介绍的安装方式都是在线安装方式,如果你需要连网请参考:Linux:宿主机通过桥接方式连接的VMware内部Linux14.04虚拟机(静态IP)实现上网方案


  • 环境:

  OS:Linux Ubuntu14.04 Server X64;
  服务器列表:
  192.168.1.200 master
  192.168.1.201 node1
  192.168.1.202 node2
  192.168.1.203 node3



  • 安装SSH服务
  测试是否安装了SSH:



sudo ps -e | grep ssh
DSC0000.png

  如果返回包含sshd的进程,就表示已经安装过openssh-server服务,否则未安装。
  安装openssh-server服务:



sudo apt-get install openssh-server
  如果提示安装失败,请执行更新命令:



sudo apt-get update
  不过本人在更新过程中遇到问题,执行安装ssh也出现问题:Package openssh-server is not available, but is referred to by another package.
  解决方案请参考:Linux:安装OpenSSH-Server E:Package openssh-server has no installation candidate
DSC0001.png

  ssh 服务操作命令:
DSC0002.png


  备注:
  为了实现各个子节点都可以使用putty连接,把Master,node1,node2,node3都安装了ssh服务。
  而事实上,要是master可以无密码登录各个子节点,其他子节点(node1,node2,node3)也必须安装ssh服务。



  • 为Master机器配置SSH无密码登录
  1)设置master的ssh为无需密码自动登录
  切换到hadoop账户下(保证用户hadoop可以无需密码登录,应为我们后边安装hadoop属于的账户是hadoop账户)



su - hadoop
cd /home/hadoop
ssh-keygen -t rsa
  然后会遇到三次让输入的时候,第一次直接回车,第二次和第三次分别是:让输入密码和确认密码,我们这里是要实现无密码登录。所以以上三次输入都直接回车,不设置什么密码,也就是空密码登录。
DSC0003.png

  2)之后再/home/hadoop/下会产生一个.ssh的文件夹;ls查看:
DSC0004.png

  3)将公钥追加到authorized_keys文件中



cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys
  4)master本机使用ssh localhost测试:
  第一次会提示是否“Are you sure you want to continue connecting(yes/no)?”,直接输入yes,下一次输入ssh localhost就不会在提示了。
DSC0005.png

  5)修改各个节点(master,node1,node2,node3)的hosts:
  统计添加如下host列表:
DSC0006.png

  目的,为后边实现ssh连接使用,不用输入ip,使用机器名就可以。
  6)为了确保master可以无需密码自动登录到node1,node2和node3,现在node1,node2和node3上生成authorized_keys。
  (依次为三个子节点node1,node2,node3)执行命令:



su hadoop
cd /home/hadoop
ssh-keygen -t rsa
DSC0007.png

  一路回车,和master安装方式一样。
  7)复制master上的authorized_keys到三个子节点上(node1,node2,node3):
  首先,为了避免权限问题,我们可以事先设置文件和目录权限:



#设置authorized_keys权限
$ chmod 600 authorized_keys
#设置.ssh目录权限
$ chmod 700 -R .ssh
DSC0008.png

  然后拷贝master上的authorized_keys到三个子节点上(node1,node2,node3)
DSC0009.png

  这里会提示输入密码,输入hadoop账号密码就可以了。
8)测试:ssh node1、ssh node2和ssh node3(第一次需要输入yes)
DSC00010.png

  如果不需要输入密码,就表示配置成功,否则配置失败。
  参考资料:
  ssh-keygen 的 详解              :http://blog.csdn.net/wh_19910525/article/details/7433164
  Hadoop集群配置(最全面总结):http://blog.csdn.net/hguisu/article/details/7237395

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-387185-1-1.html 上篇帖子: Linux的学习路线图 下篇帖子: VMware12版虚拟机怎么安装win7系统
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表