Hadoop的完全分布式搭建

一、准备虚拟机两台

1.将虚拟机进行克隆https://www.cnblogs.com/the-roc/p/12336745.html

2.1将克隆虚拟机的IP修改一下

vi /etc/sysconfig/network-scripts/ifcfg-ens33

 

 完成后：systemctl restart network

2.2 修改主机名

vim /etc/hostname

reboot 重启生效

2.3修改ip与主机映射

vim /etc/hosts

 

 reboot   重启

二、开始完全分布式搭建

1.1先清空克隆机dfs文件夹的内容

cd /opt/software//hadoop-2.7.7/tmp/dfs/

删除所有   rm -rf *

1.2在原机上添加从节点ip映射

vim /etc/hosts

 

 1.3做ssh免密

生成密钥对   ssh-keygen

  ssh-copy-id hdp05

1.4修改hdfs-site.xfs     

两台虚拟机都需要修改

vim /opt/software/hadoop-2.7.7/etc/hadoop/hdfs-site.xml

 

 1.5把从节点加到slaves 中

vim /opt/software/hadoop-2.7.7/etc/hadoop/slaves

 

 1.6启动测试  

start-dfs.sh