通过为maven依赖项提供spark-classPath来减少应用程序jar的大小:我的集群有3个运行hadoop和spark的ec2实例。如果我使用maven依赖项构建jar，它会变得太大(大约100MB)，我想避免这种情况，因为Jar正在所有节点上进行复制，每次我运行作业。为了避免我构建了一个maven包作为“maven包”。为了解决依赖关系，我已经在每个节点上下载了所有maven依赖关系，然后只在jar路径下方提供:我在“spark-defaults.conf”中的每个节点上添加了类路径作为spark.driver.extraClassPath/home/spark/.m2/re