提升 maven 编译 scala 的速度

我们 spark 的计算任务是用 scala 来写的,maven 编译,但是随着 scala 源文件的数量越来越多,(现在一个 project 已经 800+ 源文件了),编译速度成为了一个很大瓶颈,编译一次都要 10+ 分钟,大大影响了开发效率

首先想到的是,排除掉一些与自己计算任务无关的代码,看看能不能加速,从这里看到 https://stackoverflow.com/ques…
通过 exclude 的方式可以排除

<plugin>
  <groupId>org.apache.maven.plugins</groupId>
  <artifactId>maven-compiler-plugin</artifactId>
  <configuration>
    <excludes>
      <exclude>**/api/test/omi/*.java</exclude>
    </excludes>
  </configuration>
</plugin>

但是我实际测试下来,发现并没有什么卵用,下面评论有人提到,是否是 src/main/scala 前缀的问题,但是不管我加不加这个前缀,都一样没用

然后重新换个方向放狗搜,看到这里 https://www.lightbend.com/blog…
这个文件介绍了 zinc 的神奇功效,堪比大力丸,然后又看到这里 http://hohonuuli.blogspot.com/…
这个文章介绍了 zinc server 的具体安装配置方式,于是就照葫芦画瓢,试试呗

首先从 https://github.com/typesafehub…
下载 zinc 的 zip 包,然而,发现这个东西在 Windows 上不好搞,卒

最终通过修改 eclipse 的启动参数 -Xmx8G -Xms4G 来加速,囧

原文 

https://zrj.me/archives/1886

本站部分文章源于互联网,本着传播知识、有益学习和研究的目的进行的转载,为网友免费提供。如有著作权人或出版方提出异议,本站将立即删除。如果您对文章转载有任何疑问请告之我们,以便我们及时纠正。

PS:推荐一个微信公众号: askHarries 或者qq群:474807195,里面会分享一些资深架构师录制的视频录像:有Spring,MyBatis,Netty源码分析,高并发、高性能、分布式、微服务架构的原理,JVM性能优化这些成为架构师必备的知识体系。还能领取免费的学习资源,目前受益良多

转载请注明原文出处:Harries Blog™ » 提升 maven 编译 scala 的速度

赞 (0)
分享到:更多 ()

评论 0

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址