spark troubleshooting--JVM GC导致的shuffle文件拉取失败
troubleshooting JVM GC导致的shuffle文件拉取失败比如,executor的JVM进程,可能内存不是很够用了。那么此时可能就会执行GC。minor GC or full GC。总之一旦发生了JVM之后,就会导致executor内,所有的工作线程全部停止,比如BlockManager,基于netty的网络通信。有时会出现的一种情况,非常普遍,在