远程调试Spark应用程序

在IDEA中远程调试Spark，核心是在Spark作业启动时添加JVM调试参数，开启调试端口，然后在IDEA中配置Remote JVM Debug连接，设置断点进行跟踪，为什么需要远程调试spark本地开发环境和生产集群存在差异，日志输出虽然能定位部分问题，但面对复杂分布式逻辑时，断点调试依然是最直接的手段，远……