ubuntu20安装Hadoop-2.8.0详细过程(第三步)| 分布式搭建hadoop
2022/7/23 5:24:11
本文主要是介绍ubuntu20安装Hadoop-2.8.0详细过程(第三步)| 分布式搭建hadoop,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
一、配置免密登录
1.1Hadoop上进行操作
配置master免密登录到slave。
ssh-keygen -t rsa
过程中输入3次enter,直至如图;
然后,目录切换到/home/w/.ssh下,ls看下下属的文件:
继续输入,复制公钥文件:
cat id_rsa.pub >> authorized_keys
修改authorized_keys文件的权限:
chmod 600 ~/.ssh/authorized_keys
将authorized_keys文件复制到slave节点的根目录下:
scp ~/.ssh/authorized_keys w@hadoop1:~/
过程中输入yes完成复制。
1.2Hadoop2、Hadoop3上进行操作
生成密钥:
ssh-keygen -t rsa
从master的authorized_keys
文件复制到本机,用于中转。
将从master复制到slave的authorized_keys
文件移动到hadoop2中的.ssh
文件夹中:
mv ~/authorized_keys ~/.ssh/
修改hadoop2中的authorized_keys
文件的权限
chmod 600 ~/.ssh/authorized_keys
进到.ssh文件夹,输入ls -l查看权限:
同样的步骤在hadoop3上重复。
1.3测试免密登录
在hadoop1上输入:
ssh hadoop2
然后输入yes后,前侧显示hadoop2即为配置成功。
输入exit即可退出hadoop2。
二、配置Hadoop
上一篇文章提到jdk安装,当时Hadoop安装包已经上载到虚拟机上。
这篇关于ubuntu20安装Hadoop-2.8.0详细过程(第三步)| 分布式搭建hadoop的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2023-05-13Windows下hadoop环境搭建之NameNode启动报错
- 2023-04-14hadoop伪分布式集群的安装(不是单机版)
- 2022-12-05Hadoop生态系统—数据仓库Hive的安装
- 2022-11-02Win10搭建Hadoop环境
- 2022-10-19Hadoop生态系统(数据仓库Hive的安装)
- 2022-10-03Hadoop、storm和Spark Streaming简单介绍
- 2022-10-03胖虎的Hadoop笔记——Hadoop的伪分布式部署
- 2022-09-11Ubuntu搭建全分布式Hadoop
- 2022-09-11Ubuntu搭建全分布式Hadoop
- 2022-09-09Ubuntu下安装伪分布式HADOOP遇到的一些问题