spark 编译遇到的错误及解决办法(三)

 Failed to execute goal org.apache.maven.plugins:maven-surefire-plugin:2.19.1:test (default-test) 

错误原因:测试代码没通过

mvn clean package -Dmaven.test.skip=true

直接跳过测试

由于全部测试耗时太长,这时需要对修改的模块进行编译(以streaming为例),并且跳过测试(由于测试文件是针对更改前的源码,所以并不适用)

./build/mvn -pl :spark-streaming_2.11 clean install -Dmaven.test.skip=true

 若全体编译过程中某个子模块失败,可以继续编译(例spark-catalyst_2.11)

mvn clean install -rf :spark-catalyst_2.11 -Dmaven.test.skip=true

 附上全编译指令,因为更改完代码投入应用后还是需要在全编译一遍的

./build/mvn -Pyarn -Phadoop-2.4 -Dhadoop.version=2.4.0 -DskipTests clean package -Dmaven.test.skip=true
原文地址:https://www.cnblogs.com/o-din/p/6347157.html