(三十五)troubleshooting之解决JVM GC导致的shuffle文件拉取失败
每一个excutor可能会有多个task,当下游stage的excutor需要向他拉取已经完成task的输出数据时,但是由于正在进行GC,所以无法正常连接,(shuffle file not found)有时会出现的一种情况,非常普遍,在spark的作业中;shuffle file not found。(spark作业中,非常非常常见的)而且,有的时候,它是偶尔才会出现的一种情况。有的时候,出现这种情况以后,会重新去提交stage、task。重新执行一遍,发现就好了。没有这种错误了。log怎么