创建 Maven 项目
2.1.1
增加 Scala
插件
Spark 由 Scala 语言开发的，所以本课件接下来的开发所使用的语言也为 Scala，咱们当
前使用的 Spark 版本为 3.0.0，
默认采用的 Scala 编译版本为 2.12，所以后续开发时。我们依
然采用这个版本。开发前请保证 IDEA 开发工具中含有 Scala 开发
插件
2.1.2
增加依赖关系
修改 Maven 项目中的 POM
文件，
增加 Spark 框架的依赖关系。本课件基于 Spark3.0 版
本，使用时请注意对应版本。
<dependencies>
<dependency>
<groupId>org.apache.spark</groupId>
<artifactId>spark-core_2.12</artifactId>
<version>3.0.0</version>
</dependency>
</dependencies>
<build>
<plugins>
<!-- 该
插件用于将 Scala
代码编译成 class
文件 -->
<plugin>
<groupId>net.alchim31.maven</groupId>
<artifactId>scala-maven-plugin</artifactId>
<version>3.2.2</version>
<executions>
<execution>
<!-- 声明绑定到 maven 的 compile 阶段 -->
<goals>
<goal>testCompile</goal>
</goals>
</execution> 尚硅谷大数据技术之 Spark
—————————————————————————————
更多 Java –大数据 –前端 –python 人工智能资料下载，可
百度访问：尚硅谷官网
7
</executions>
</plugin>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-assembly-plugin</artifactId>
<version>3.1.0</version>
<con
figuration>
<descriptorRefs>
<descriptorRef>jar-with-dependencies</descriptorRef>
</descriptorRefs>
</con
figuration>
<executions>
<execution>
<id>make-assembly</id>
<phase>package</phase>
<goals>
<goal>single</goal>
</goals>
</execution>
</executions>
</plugin>
</plugins>
</build>
版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 [email protected] 举报，一经查实，本站将立刻删除。
