hadoop入门(3)：hadoop集群的便利脚本

通过rsync分发脚本

• rsync是很好用的增量拷贝命令

• 安装rsync sudo yum -y install rsync

• 我们创建 /home/用户/bin 目录来存放脚本文件

• 以后我们可以用rsync来分发脚本

创建一键启动停止hadoop脚本

• 在 /home/用户/bin 下 vim hadoop-ctrl.sh

• 文件中写下面内容

#!/bin/bash
case $1 in
"start"){
source /etc/profile
/sjj/install/hadoop-3.2.2/sbin/start-dfs.sh
/sjj/install/hadoop-3.2.2/sbin/start-yarn.sh
/sjj/install/hadoop-3.2.2/sbin/mr-jobhistory-daemon.sh start historyserver

};;
"stop"){
/sjj/install/hadoop-3.2.2/sbin/stop-dfs.sh
/sjj/install/hadoop-3.2.2/sbin/stop-yarn.sh
/sjj/install/hadoop-3.2.2/sbin/mr-jobhistory-daemon.sh stop historyserver
};;
esac

• 赋予文件可执行权限 chmod 777 hadoop-ctrl.sh

• 启动 hadoop-ctrl.sh start

• 关闭 hadoop-ctrl.sh stop

创建显示三个节点进程的脚本

• 在 /home/用户/bin 下 vim xcall

• 文件中写下面内容

#!/bin/bash

params=$@
for((i = 1; i <= 3; i = $i + 1)) ;do
    echo ==========node00$i $params==========
    ssh node00$i "source /etc/profile;$params"
done

• 赋予文件可执行权限 chmod 777 xcall

• 显示进程 xcall jps