spark 编译遇到的错误及解决办法(三)

71 阅读 0 评论 47 点赞

我是靠谱客的博主贪玩书包，最近开发中收集的这篇文章主要介绍spark 编译遇到的错误及解决办法(三)，觉得挺不错的，现在分享给大家，希望可以做个参考。

 Failed to execute goal org.apache.maven.plugins:maven-surefire-plugin:2.19.1:test (default-test)

错误原因：测试代码没通过

mvn clean package -Dmaven.test.skip=true

直接跳过测试

由于全部测试耗时太长，这时需要对修改的模块进行编译（以streaming为例），并且跳过测试（由于测试文件是针对更改前的源码，所以并不适用）

./build/mvn -pl :spark-streaming_2.11 clean install -Dmaven.test.skip=true

若全体编译过程中某个子模块失败，可以继续编译（例spark-catalyst_2.11）

mvn clean install -rf :spark-catalyst_2.11 -Dmaven.test.skip=true

附上全编译指令，因为更改完代码投入应用后还是需要在全编译一遍的

./build/mvn -Pyarn -Phadoop-2.4 -Dhadoop.version=2.4.0 -DskipTests clean package -Dmaven.test.skip=true

转载于:https://www.cnblogs.com/o-din/p/6347157.html

以上就是贪玩书包为你收集整理的spark 编译遇到的错误及解决办法(三)的全部内容，希望文章能够帮你解决spark 编译遇到的错误及解决办法(三)所遇到的程序开发问题。

如果觉得靠谱客网站的内容还不错，欢迎将靠谱客网站推荐给程序员好友。

本图文内容来源于网友提供，作为学习参考使用，或来自网络收集整理，版权属于原作者所有。