微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

【Hadoop】VM虚拟机上搭建Hadoop集群

一、背景

      这件事做了N次,每次因为各种原因失败(比如,环境配置,hadoop参数设置),终于在春节前夕搞定。

     主要流程参照TMH_ITBOY文章进行,再结合个人需求进行调整。

 

二、部署规划

集群部署规划

 

三、流程

【Step 1】 VMware新建虚拟机

补充:

(1)VMware 15.0.3下载:https://www.luochenzhimu.com/archives/4431.html

(2)虚拟机存储位置改为如下

主机hadoop1: .\Virtual Machines\hadoops\hadoop1
主机hadoop2: .\Virtual Machines\hadoops\hadoop2
主机hadoop3: .\Virtual Machines\hadoops\hadoop3
主机hadoop4: .\Virtual Machines\hadoops\hadoop4
主机hadoop5: .\Virtual Machines\hadoops\hadoop5

(3)虚拟机内存除hadoop1外,其他设为1G(因为我的笔记本内存小)


【Step 2】在虚拟机安装CentOS 6.7 64位系统

补充:

(1)CentOS-6.7-x86_64-bin-DVD1.iso

 

【Step 3】CentOS 6.7 网络配置的相关配置,及JDK的安装

补充:

 

【Step 4】虚拟机克隆,及Hadoop环境配置与安装

补充:

 

【Step 5】测试

 

 

四、其他

1.Hadoop命令手册

 

 

 

喜小编cc 发布了69 篇原创文章 · 获赞 28 · 访问量 23万+ 私信 关注

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐