微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

余老师带你学习大数据框架全栈第十一章Flink第四节Standalone模式下提交job

web控制页面介绍

1、当前集群的状态,3个task,0个运行的。

在这里插入图片描述

2、运行的Job和完成的Job都是0个。

在这里插入图片描述

3、当前TaskManager的情况,我们的集群是三个TaskManager。

在这里插入图片描述

4、JobManager的基本信息

在这里插入图片描述

5、提交Job

在这里插入图片描述

打包

6、将poml文件中的主程序删除修改StreamWordCount的host和端口号,为app-11和7777

在这里插入图片描述


在这里插入图片描述

7、查看Java版本
命令:java -version

在这里插入图片描述

8、压缩程序
命令:tar -zcf Flink.tar Flink/

在这里插入图片描述

9、拷贝到app-11上
命令:scp Flink.tar 192.168.60.139:/workspace_logs/

在这里插入图片描述

10、返回app-11,将程序拷贝到Flink安装目录下
命令:cp /workspace_logs/Flink.tar /hadoop/Flink/

在这里插入图片描述

11、解压程序
命令:tar -xf Flink.tar

在这里插入图片描述

12、进入到这个程序的目录下
命令:cd Flink

在这里插入图片描述

13、程序打包
命令:
mvn clean scala:compile compile package

在这里插入图片描述

14、查看打包程序
命令:ls target/

在这里插入图片描述

15、将打包好的程序拷贝到Flink安装目录下
命令:cp target/FlinkTutorial-1.0-SNAPSHOT-jar-with-dependencies.jar /hadoop/Flink/

在这里插入图片描述

提交job

16、返回网页,上传job,找到Workspace目录下的jar包上传

在这里插入图片描述


在这里插入图片描述


在这里插入图片描述

17、在new terminal中启动7777端口号
命令:nc -lk 7777

在这里插入图片描述

18、填写主程序和相关的配置信息

在这里插入图片描述

19、在Running Jobs中可以查看到信息

在这里插入图片描述

20、在7777端口号下输入Hello Word

在这里插入图片描述

21、在Task Manager中的studout中可以看到输出结果

在这里插入图片描述


详细学习内容可观看Spark快速大数据处理扫一扫~~~或者引擎搜索Spark余海峰

在这里插入图片描述

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐