如何采用IDEA创建一个Spark工程呢?

1.选择File-Project

2.选择Maven,选用的是JDK1.8,点击Next

3.定义Maven_project的GAV.点击Next

4.命名好自己的Project name ,选择对应的路径,点击finish
工程创建好了

5.打开IDEA界面后,将默认创建的src模块删除

6.创建自己的module
点击该工程,右键点击new–>module

7.选择maven,选择Next

8.做好相关的命名,点击next

9.填写对应的,随后点击finish,

10.一个spark maven project创建成功了
以后可以在module的pom添加相关的依赖并打jar包运行在本地或者集群上了

11.创建完工程和module之后,需要创建对应的包package
点击File->project Structure

12.点击module,点击对应的module,创建对应的package

13.点击main,选择new folder,

14.创建名为scala的文件夹,点击ok

15.创建好后,选中对应的文件,再选择上方的Mark as将其标记为对应的文件类型
比如main中的java和scala文件是Sources,resources是Resources文件

16.同理,test文件也类似,最后的包结构如下
这里的包结构要注意,main和test都是普通的文件,多注意颜色,
main下的java和scala与test下的java和scala是文件标签是不一样的
(之后遇到创建包遇到问题,第一时间检查这里的问题

17,这里还需要注意一点
language-level要选用8

哦啦
觉得好的点个赞噢
友情推广:小伙伴创建的微信公众平台offerNeed,大量的公司内推信息