Hadoop集群SSH无密登录

2018-12-10 13:29:57 1741 收藏
分类专栏： Hadoop 文章标签： 集群 SSH无密登录 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39657909/article/details/84938489
版权

Hadoop集群SSH无密登录

1.原理及操作

在这里插入图片描述

1.1在登录用户家目录的.ssh下操作

在这里插入图片描述

1.2生成公钥和私钥

1 执行命令：ssh-keygen -t rsa
然后敲（三个回车），就会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）
2 .ssh文件夹下的文件功能解释
在这里插入图片描述

1.3将公钥拷贝到要免密登录的目标机器上

执行命令：ssh-copy-id 主机名

2.无密配置（注意命令执行位置！）

2.1在配置NameNode主机lsl用户家目录的.ssh目录下

1.执行命令：ssh-keygen -t rsa
2.分发公钥给每个目标机器：

ssh-copy-id hadoop102
ssh-copy-id hadoop103
ssh-copy-id hadoop104

2.2在配置NameNode主机root用户家目录的.ssh目录下

1.执行命令：ssh-keygen -t rsa
2.分发公钥给每个目标机器：

ssh-copy-id hadoop102
ssh-copy-id hadoop103
ssh-copy-id hadoop104

2.3在配置ResourceManager主机lsl用户家目录的.ssh目录下

1.执行命令：ssh-keygen -t rsa
2.分发公钥给每个目标机器：

ssh-copy-id hadoop102
ssh-copy-id hadoop103
ssh-copy-id hadoop104

3.如何避免集群启动了非集群中的机器（配置slaves文件）

slaves文件位置：/opt/module/hadoop-2.7.2/etc/hadoop/slaves
执行命令：vim slaves
添加如下内容：

hadoop102
hadoop103
hadoop104

注意：该文件中添加的内容结尾不允许有空格，文件中不允许有空行

额外注：
这里可能会报错：
在这里插入图片描述
解决：
vim /etc/hosts
删除其中的内容并写下自己集群的主机名与ip地址，举个栗子：
在这里插入图片描述

版权声明：本博客为记录本人自学感悟，转载需注明出处！
https://me.csdn.net/qq_39657909

已标记关键词 清除标记
Hadoop集群（第5期）_Hadoop安装配置
weixin_34060741的博客
05-16 149
1、集群部署介绍 1.1 Hadoop简介   　　Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。 　　对于Hadoop的集群来讲，可以分成...
表情包
插入表情
还能输入1000个字符
Hadoop集群安装（SSH无密登录）
帝小辰
12-02 35
前言 ： 集群配置需要三台主机 集群网络配置 ：这里第一台主机为我们上一篇博客写到的 dxc 1.修改主机二 hostnamectl set-hostname dxc2（自定义主机二名字） 2.修改主机三 hostnamectl set-hostname dxc3（自定义主机三名字） 3.分别修改各主机配置文件 在第二台主机dxc2中 vi /etc/hosts
hadoop集群ssh免密登录
chaojiwanwan的博客
05-09 463
1.在master，node1，node2中执行 sudo apt install ssh sudo apt install rsync hadoop@master:~$ ssh-keygen -t rsa //一直按回车 2.在 master（master角色） 执行，将~/.ssh/下的id_rsa.pub公私作为认证发放到master，node1，node2的~/.ssh/下
Hadoop集群SSH服务和免密码登录的配置
ITYangs的博客
04-12 1万+
前言： SSH 为 Secure Shell 的缩写，由 IETF 的网络小组（Network Working Group）所制定；SSH 为建立在 应用层和传输层基础上的安全协议。SSH 是目前较可靠，专为远程登录会话和其他网络服务提供安全性的 协议。 在Hadoop集群或其他集群中广泛应用用，可用于机器之间免密码登录和执行脚本，如的Hadoop集群中 NameNo
Hadoop完全分布式环境搭建之生成ssh秘钥并配置
xqz583722585的博客
05-13 1913
首先说明，我模拟hadoop集群，创建了三个节点，分别为master,slave1,slave2，他们在本文配置基本一样，请各位举一反三。还有，在做这步之前请在各节点中都安装好jdk（版本越高越好，当然，与你的hadoop版本协调）与openssh接下来我们依然做点准备工作1.给本机起名，便于访问，就是不要使用我们的ip了指令:vim /etc/hostname以slave2节点举例，在编辑时先按...
Hadoop 集群 傻瓜式搭建手记 （三）SSH互联
来往
12-13 7806
本来以为网络搭建好了就可以了，没有想到还有ssh这个东西需要配置免密码访问，这个东西应该也算是软件上互联吧。 ssh免密码本来是很简单的一件事情，不过我折腾了2天，这就是菜鸟的必经过程了，我算是觉悟了。 经过无数次的尝试，终于拼出了一条正确的道路： 1. 首先在本地生成空密码的公钥和私钥： ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 在网
成功安装hadoop集群
lightj1996的博客
03-27 1151
之前学习了一段时间的hadoop，最近想总结一下自己的成果，便用写博客的方式去复习。hadoop入门难就难在搭建集群。初学的开发人员大可不必去研究hadoop安装，可以先往后面学习。所以这里总结hadoop安装步骤供初学者拷贝。
hadoop集群配置ssh免登录shell脚本下载
10-01
主机：个人电脑、集群主机 操作：通过个人主机遍历集群主机分发ssh免登录命令和校验各个主机之间是否免登录成功 相关下载链接：//download.csdn.net/download/jel314/10
集群环境ssh免密码登录设置
数字化发展与战略研究
05-04 1168
一、准备工作 1) 用客户端工具（ssh client或者putty）连接到linux服务器。在root用户下输入命令 vi /etc/hosts,用vi编辑hosts文件，如下： #127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 #::1 localhos
hadoop集群之间无密码登录设置
tlimited的博客
06-21 1849
目前有几台机器，主机器叫master，另一台叫slave1。要在master上无密码登录slave1，需要做无密码登录操作。 步骤一 在master上操作下面命令： 输入ssh-keygen -t rsa后一直按回车键，好像有3次 $ cd ~ $ ssh-keygen -t rsa $ cd .ssh $ cp id_rsa.pub authorized_keys $ chmod 6...
【完全分布式Hadoop】（三）集群设置SSH无密码登陆
u013429010的博客
10-31 606
之前的文章已经有SSH免密部分，这里单独列出来只是为了方便查找 打通SSH，设置ssh无密码登陆（所有节点） 组建了三个节点的集群DEV2、DEV3、DEV4 在所有节点上执行 ssh-keygen -t rsa 一路回车，生成无密码的密钥对。 在DEV3中执行： scp ~/.ssh/id_rsa.pub root@DEV2:~/.ssh/rsa3 在DEV4中执行： scp ~/.ssh/i...
基于hadoop2.6.5搭建5个节点的分布式集群—（二）配置SSH免密码通信
billyuncle的博客
06-16 958
六、配置SSH免密码通讯  1、对hadoop001节点上的root用户配置ssh     输入“ssh-keygen -t rsa”，生成秘钥  2、使用“cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys”命令，把公钥复制到认证文件(authorized_keys)中，如下图所示：3、确保.ssh目录的权限是700（使用chmod 700 .ssh命令修改）...
hadoop集群ssh集群免密操作
qq_41420150的博客
06-04 325
由于集群中为多态机器，这里规定一台主机为master，其他都为从机为slave，在进行集群免密时需要知道各主从机的IP和hostname，这里主机hostname为master，从机为slave1，slave2.。。。。。       修改hostname的操作，sudo vim /etc/hostname。修改hostname主要为了方便自己区别。       对自己本机的免密操作参考上篇博客，...
hadoop启动集群的免密码登陆设置
张张张
03-25 4370
当我们要启动集群的时候,需要一指输入密码,这样下来是不是很费劲呢,不过跟着我设置了以后就不用发愁了步骤:1.进入到当前使用hadoop的用户主体目录里面,通过ll -a 先查看一下2.输入 ssh localhost 3.此时再ll -a一下会发现里面多了一个隐藏文件.ssh4.进入这个文件夹 cd .ssh5.输入 ssh-keygen -t rsa         --> 遇到提示一直按...
【hadoop】ssh localhost 免密码登陆
u011762604的博客
06-05 525
首先ssh-keygen 生成秘钥,然后ssh-copy-id localhost 加到本地.
linux hadoop集群简单几步完成SSH配置
dongping8887的专栏
10-22 443
linux hadoop集群简单几步完成SSH配置（每台机器互相之间都自动配置SSH）。 不可思议。真的很简单。 我将链接给大家共享下，有需要的可以下载使用。如有困难，可联系我QQ：120945078。微信：dongping8887。 配置方式链接：http://download.csdn.net/detail/dongping8887/9661040 效果： e
linux 配置jdk+ssh免密登录+hadoop集群配置
IT_jiao的博客
04-13 315
1.jdk配置下载：jdk-10_linux-x64_bin.rpm安装：# rpm -ivh jdk-10_linux-x64_bin.rpm注：bin包：#chmod +x .........bin#./.......bintar.gz:解压缩：# tar -xzvf .........tar.gz移到某个文件夹：# mv ......../  /usr/local/配置环境变量：# vi /...
hadoop伪分布式集群ssh免密码登录
Gscsd的博客
03-29 2284
来配置我们的ssh无密码登录到slave1和slave2上1.    首先检查每个虚拟机是否安装了ssh和启动了sshd服务如果没有安装的话要执行以下代码这个命令要在root下运行，因为hadoop用户还没有这个权限这个命令是安装ssh的客户端和服务端2.  然后我们切换到hadoop用户下，运行ssh localhost命令，这个命令会生成 .ssh隐藏文件夹，遇到提示就输入yes3. 我们要进...
hadoop学习笔记(五)——全分布模式下SSH免密码登陆的实现
亡羊补牢
06-16 5633
因为三个节点要相互访问，所以，三个节点都是客户端，也都是服务器端，我们分别在三个节点上创建一对密钥文件，密钥文件包括公钥文件(~/.ssh/id_rsa.pub)和私钥文件 (~/.ssh/id_rsa)。 客户端在使用ssh登录到其他节点上的时候，ssh会发送私钥去和其他节点上的公钥去匹配，如果匹配成功，那么就会自动登录，而不需要输入密码，这就实现了无密码登录。 所以，客户端要实现免密码登录到目标节点上的时候，就需要把公钥写入目标节点上的~/.ssh/authorized_keys中。
©️2020 CSDN 皮肤主题: 技术黑板 设计师:CSDN官方博客 返回首页