spark集群通信延迟解决方案

节点间通信延迟优先查虚拟网络模式和宿主资源超分，再用iperf3与Spark参数闭环定位，别一上来就改Spark配置，你先把这句话记住：虚拟机上跑Spark，延迟高不一定是Spark的锅，虚拟机集群多了一层vSwitch、虚拟网卡和宿主调度，数据包路径比物理机长，排查顺序应该是先测网络，再看资源，最后调Spar……