[hadoop那些事]大数据综合平台——本科时期收官之作

目录

• 一、写在前面
• 二、软件清单
• 三、ubuntu LTS 16.04
• jdk 1.8 8u162.x64

一、写在前面

截至大三上学期（2020年12月），本人写《hadoop那些事》系列已经有25篇了，初衷其实就是比赛时期做笔记用，因为安装hadoop及其组件需要一直保持手感，从虚拟机的ip配置到各种小错以及hadoop、MysqL、sqoop、mapreduce、hbase、hive等等；后来写博客是为了帮助同学，以及缓解老师压力，这个过程是真的很磨练人，因为要从0开始，甚至虚拟机的安装，VM的安装开始，一直到 跑MR程序，那是2020年上半年，在家经过疫情的时候，给同学开远程协助都一直开到半夜两三点。然而到现在从这里写一些博客成了我的一个解压方式，因为把曾经我掌握的技术总结分享到网络上影响别人是一件很幸福的事情，在这个过程中我也经历了查阅很多很多博客，官方文档，请教其他同学，浏览器上面的标签密密麻麻，最终调试成功的时候只是我一个人的喜悦，通过博客，可以变成很多人的喜悦，同时每次博客写成后我都会让舍友同学照做一遍看看我遗漏了哪些细节并及时改正，真的很喜欢这段时光，我可以和键盘交流，可以和正在学习的你交流。

二、软件清单

1. VMware® Workstation 15 Pro-15.5.6 build-16341506

2. ubuntu LTS 16.04

3. hadoop 3.1.3

4. jdk 1.8 8u162.x64

5. hbase 2.2.2

6. hive 3.1.2

7. MysqL 5.1.40

8. scala 2.11.8

9. spark 2.4.0

10. sbt 1.3.8

11. maven 3.6.3

    如果有大佬看到我这篇文章请先不要谈论用docker部署，问就是在部署docker了
    

三、ubuntu LTS 16.04

下载地址：https://releases.ubuntu.com/16.04.7/
官网有可能下载慢，但是比非会员百度云和迅雷云快吧。

安装应该就像之前一样，这次默认是桌面版本。
如下图:我新建的相关配置

然后就等呀等，等不到头。 如下图：

如箭头所示 ，点击一下，就会出现如下图。

点击skip即可。 由于网络问题所以下载东西会非常慢。到后面就很顺畅了。

jdk 1.8 8u162.x64