IDEA使用maven插件打jar包流程

小程序：扫一扫查出行
【扫一扫了解最新限行尾号】
复制小程序

idea使用maven插件打jar包步骤以及遇到的问题

idea自带了maven工具，idea右边点击maven选项：

一、在pom中添加插件，直接复制就好，如下选项

<plugin>
<artifactId>maven-assembly-plugin</artifactId>
<version>2.4</version>
<configuration>
<descriptorRefs>
<descriptorRef>jar-with-dependencies</descriptorRef>
</descriptorRefs>
<archive>
<manifest>
<mainClass>test.TestOperFile</mainClass>
</manifest>
</archive>
</configuration>
<executions>
<execution>
<id>make-assembly</id>
<phase>package</phase>
<goals>
<goal>single</goal>
</goals>
</execution>
</executions>
</plugin>

注意：关于插件中这个地方需要注意一下：

这里分为两种情况

a.打包scala程序

如果只是打包scala程序的话，这里代表的是主函数的方法名，一定是全路径名(包名+类名)

jar包运行方式：java -jar test.jar [参数1 参数2...]

b.打包spark程序

如果是打包spark程序的话，这里可以随意，不影响，运行的时候需要指定类名即可

jar包运行方式:

spark-submit --class test.testOperator \
--master yarn \
--deploy-mode client \
--driver-memory 3g \
--executor-memory 2g \
--executor-cores 1 \
--num-executors 4 \
--jars /hadoop/datadir/deploy/lib/mysql-connector-java-5.1.7-bin.jar \
--conf spark.sql.shuffle.partitions=100 \
--conf spark.shuffle.sort.bypassMergeThreshold=5 \
--conf spark.kryoserializer.buffer.max=128m \
--conf spark.serializer=org.apache.spark.serializer.KryoSerializer \
--conf spark.sql.parquet.compression.codec=snappy \
--conf spark.shuffle.sort.bypassMergeThreshold=5 \
--conf spark.locality.wait.node=6 \
--conf spark.locality.wait.process=6 \
test.jar [参数1,参数2...]

运行参数可以根据自己的需求进行调整

二、开始打包(清空target目录->编译->打包)，有时候也需要执行install进行发布到仓库中，根据自己的需求

打包后的结果：

*************************************************************************************************************************************************************

* 或者进行打包的时候后也可以直接打开idea底下的terminal，执行命令记性打包:mvn assembly:assembly

*************************************************************************************************************************************************************

如果出现上图所示，说明打包成功，此时找到右边的target目录，下面会有两个包：