spark 常用设置

1、
spark.hadoop.validateOutputSpecs

若设置为true,saveAsHadoopFile会验证输出目录是否存在。虽然设为false可直接覆盖文件路径
原文地址:https://www.cnblogs.com/ultimateWorld/p/11188003.html