spark创建maven工程创建scala目录并编译

川长思鸟来 2022-12-31 13:19 178阅读 0赞

# 背景 #

我创建spark的maven工程的时候，在java目录同级还创建了一个scala目录。这就得考虑编译相关的事了。

# 解决 #

### 1、创建source folder ###

如下图所示，直接创建就好了  
![image.png][]

### 2、编译带来的问题 ###

编译的时候发现一个问题，就是在scala目录中的scala文件可以编译的上，而java文件编译不上，而java目录下的java文件是可以的，  
经过查阅问题，发现默认的maven compile是不可以编译多个source folder的，需要添加plugin,如下，问题解决

<plugin>
                    <groupId>org.codehaus.mojo</groupId>
                    <artifactId>build-helper-maven-plugin</artifactId>
                    <executions>
                        <execution>
                            <id>add-source</id>
                            <phase>initialize</phase>
                            <goals>
                                <goal>add-source</goal>
                            </goals>
                            <configuration>
                                <sources>
                                    <source>${project.basedir}/src/main/scala</source>
                                    <source>${project.basedir}/src/main/java</source>
                                </sources>
                            </configuration>
                        </execution>
                    </executions>
                </plugin>

[image.png]: /images/20221120/d5a849aaeb2c44e599c472bce30e0d8d.png

发表评论取消回复

表情：

评论列表（有 0 条评论，178人围观）

还没有评论，来说两句吧...

相关阅读

相关 Spark利用（idea+maven+scala）创建wordcount打包jar并在spark on yarn上运行——Spark的开发

今天的你不付昨天的辛苦，今天的辛苦定会拥抱明日的幸福，每一次的成长，都要给自己以鼓励，每一次的突破，都给自己以信心，万花丛中我不是最美，但我有我的自信 ———————

左手的ㄟ右手/ 2024年02月19日 15:08/ 0 赞/ 47 阅读

相关创建maven web工程

环境：eclipse luna new maven project，选择默认workspace location，选择archetype-quickstart，

你的名字/ 2024年02月17日 17:01/ 0 赞/ 75 阅读

相关 spark创建maven工程创建scala目录并编译

背景我创建spark的maven工程的时候，在java目录同级还创建了一个scala目录。这就得考虑编译相关的事了。解决 1、创建source folder

川长思鸟来/ 2022年12月31日 13:19/ 0 赞/ 179 阅读

相关 Spark中IDEA Maven工程创建与配置

目录一、IDEA Maven工程创建与配置二、开发Spark Application程序并进行本地测试三、生成Jar包并提交

小灰灰/ 2022年12月05日 13:50/ 0 赞/ 306 阅读

相关使用maven创建scala工程（scala和java混一起）

Pom.xml <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.a

- 日理万妓/ 2022年10月25日 15:29/ 0 赞/ 156 阅读

相关 IDEA创建spark maven项目并连接远程spark集群

环境： scala：2.12.10 spark：3.0.3 1、创建scala maven项目，如下图所示： ![watermark_type_ZHJvaWRzYW5z

红太狼/ 2022年09月09日 06:25/ 0 赞/ 224 阅读

相关创建maven父子工程

![Image 1][] 1.首先new 选择other 搜索maven 选择maven project -->next ![Image 1][] 3.继续nex

古城微笑少年丶/ 2022年08月21日 07:53/ 0 赞/ 295 阅读

相关创建Maven父子工程并导入Eclipse

\\\\1. 安装eclipse \\\\2. 更改Preferences （1）General–>Workspace，编码改成UTF-8；（2）修改Java路径，

电玩女神/ 2022年07月24日 07:22/ 0 赞/ 329 阅读

相关创建maven【聚合工程】

所谓聚合项目，实际上就是对项目分模块，互联网项目一般来说按照业务分（订单模块、VIP模块、支付模块、CMS模块…），传统的软件项目，大多采用分层的方式(Dao、Serivce、

悠悠/ 2022年02月15日 16:11/ 0 赞/ 341 阅读

相关《IDEA创建Spark工程并submit执行》

《windows下IDEA创建Spark工程并提交执行》 1、创建时在Scala中选择IDEA项目 ![在这里插入图片描述][watermark_

深碍√TFBOYSˉ_/ 2022年01月31日 08:49/ 0 赞/ 248 阅读