默认120s
所有网络交互的默认超时时间。 如果未配置,则将使用此配置代替spark.storage.blockManagerSlaveTimeoutMs,spark.shuffle.io.connectionTimeout,spark.rpc.askTimeout或spark.rpc.lookupTimeout。

用途

若如出现各种timeout,executor lost ,task lost
spark.network.timeout 根据情况改成300(5min)或更高

参考

Configuration - Spark 3.0.2 Documentation

关于配置:Spark心跳超时,执行程序自行退出 | 码农家园

Logo

腾讯云面向开发者汇聚海量精品云计算使用和开发经验,营造开放的云计算技术生态圈。

更多推荐