Hadoop中ssh+IP、ssh+别名免秘钥登录配置

小程序：扫一扫查出行
【扫一扫了解最新限行尾号】
复制小程序

1、为什么要进行 SSH 无密码验证配置？

Hadoop运行过程中需要管理远端Hadoop守护进程，在Hadoop启动以后，NameNode是通过SSH（Secure Shell）来启动和停止各个DataNode上的各种守护进程的。这就必须在节点之间执行指令的时候是不需要输入密码的形式，故我们需要配置SSH运用无密码公钥认证的形式，这样NameNode使用SSH无密码登录并启动DataName进程，同样原理，DataNode上也能使用SSH无密码登录到NameNode。

2、为什么要使用 SSH？

在linux系统中,ssh是远程登录的默认工具,因为该工具的协议使用了RSA/DSA的加密算法.该工具做linux系统的远程管理是非常安全的。telnet,因为其不安全性,在linux系统中被搁置使用了。

3、SSH 原理

Master（NameNode | JobTracker）作为客户端，要实现无密码公钥认证，连接到服务器Salve（DataNode | Tasktracker）上时，需要在Master上生成一个密钥对，包括一个公钥和一个私钥，而后将公钥复制到所有的Slave上。当Master通过SSH连接Salve时，Salve就会生成一个随机数并用Master的公钥对随机数进行加密，并发送给Master。Master收到加密数之后再用私钥解密，并将解密数回传给Slave，Slave确认解密数无误之后就允许Master进行连接了。这就是一个公钥认证过程，其间不需要用户手工输入密码。重要过程是将客户端Master复制到Slave上。

4、配置过程

我们这里有三台机器，分别是：

hostname ipaddress subnet mask geteway

1、 master192.168.146.200255.255.255.0192.168.146.2

2、 slave1 192.168.146.201255.255.255.0192.168.146.2

3、 slave2 192.168.146.202255.255.255.0192.168.146.2

那么我们想要的结果是在 master 机器上能不输入密码直接登录到 slave1 和 slave2 机器上。反之在 slave1 上能不输入密码登录到 master 和 slave2 机器上。

首先我们配置从 master 机器上不输入密码登录到 slave1 机器上。

注意：这几台机器我们都以 hadoop 用户登录进去。

第一步：确认系统已经安装了 SSH

我们需要两个服务，ssh和rsync。可以通过下面命令查看结果显示如下：

rpm –qa | grep openssh
rpm –qa | grep rsync

出现如下信息，则已经安装了SSH

如果没有安装 ssh 和 rsync,则通过下面的命令安装

yum install ssh 安装SSH协议
yum install rsync （rsync是一个远程数据同步工具，可通过LAN/WAN快速同步多台主机间的文件）
service sshd restart 启动服务

要确保所有的机器都安装 SSH

第二步：master 机器上生成秘钥对

在 master 机器上输入一下命令：

ssh-keygen –t rsa –P ''

这条命令是生成无密码秘钥对，rsa 是加密算法，-P '' 表示密码为空。询问其保存路径时直接回车采用默认路径。生成的密钥对：id_rsa和id_rsa.pub，默认存储在"/home/hadoop/.ssh"目录下。

查看"/home/hadoop/"下是否有".ssh"文件夹，且".ssh"文件下是否有两个刚生产的无密码密钥对。

第三步：把公钥 id_rsa.pub追加到授权的key里面去。

cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

第四步：修改文件"authorized_keys"权限

权限的设置非常重要，因为不安全的设置安全设置，会让你不能使用RSA功能，即在进行登录时仍然要求你输入密码。

chmod 600 ~/.ssh/authorized_keys

第五步：用root用户登录服务器修改SSH配置文件

注意这里要用 root 用户登录，不然没有权限修改。

vi /etc/ssh/sshd_config

把文件中的下面几条信息的注释去掉：

RSAAuthentication yes # 启用 RSA 认证
PubkeyAuthentication yes # 启用公钥私钥配对认证方式
AuthorizedKeysFile .ssh/authorized_keys # 公钥文件路径（和上面生成的文件同）

第六步：重启服务

service sshd restart

第七步：把公钥复制所有的 slave 机器上

scp ~/.ssh/id_rsa.pub 远程用户名@远程服务器IP:~/

这里我们先复制到 slave1 机器上，IP 为 192.168.146.201

由上图可知，我们将文件 in_rsa.pub 文件传过去了，位置是 /home/hadoop。我们登录到 slave1 机器上查看这个文件

第八步：如果是第一次使用该命令，则需要在"/home/hadoop/"下创建".ssh"文件夹，并且修改该文件夹权限为 “700”

如果不进行，即使你按照前面的操作设置了"authorized_keys"权限，并配置了"/etc/ssh/sshd_config"，还重启了sshd服务，在master能用"ssh localhost"进行无密码登录，但是对slave1进行登录仍然需要输入密码，就是因为".ssh"文件夹的权限设置不对。这个文件夹".ssh"在配置SSH无密码登录时系统自动生成时，权限自动为"700"，如果是自己手动创建，它的组权限和其他权限都有，这样就会导致RSA无密码远程登录失败。

mkdir ~/.ssh //创建 .ssh 的文件夹
chmod 700 ~/.ssh //给 .ssh 文件夹权限