微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

大数据之hadoop

简介

未完待续

架构

未完待续

安装

主机名hadoop100hadoop101hadoop102
IP192.168.100.100192.168.100.101192.168.100.102
前置要求jdk、zookeeper
前置要求节点zkzkzk
HDFSJournalNodeJournalNodeJournalNode
NameNodeNameNode
DatanodeDatanodeDatanode
YARNResourceManagerResourceManager
NodeManagerNodeManagerNodeManager

环境配置

JDK安装(三台)

#解压 
tar -zxvf jdk-8u271-linux-x64.tar.gz -C /opt/ 

#添加环境变量
vim /etc/profile 
export JAVA_HOME=/opt/jdk1.8.0_271 
export CLAsspATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib 
export PATH=$JAVA_HOME/bin:$PATH 

#环境变量生效 
source /etc/profile

#验证
java -version

HDFS

简介

架构

shell操作hdfs

java操作hdfs

MapReduce

简介

架构

java操作mapreduce

YARN

简介

架构

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐