当前位置: 代码迷 >> 综合 >> ERROR DiskBlockObjectWriter: Uncaught exception while reverting partial writes to file?/tmp 设备上没有空间
  详细解决方案

ERROR DiskBlockObjectWriter: Uncaught exception while reverting partial writes to file?/tmp 设备上没有空间

热度:45   发布时间:2023-12-16 05:12:44.0

spark-submit 提交任务时报错:

ERROR DiskBlockObjectWriter: Uncaught exception while reverting partial writes to file /tmp/blockmgr-66dd8b05-fb0f-4607-9efd-22c1bb75bace/3f/temp_shuffle_73cf6031-fc6a-4f5f-96b5-ba7540fb7020
java.io.IOException: 设备上没有空间

原因:执行内存过大超过虚拟机空闲内存

spark-submit --driver-memory 2g

解决方案:

1.减小执行内存: spark-submit --driver-memory 1g

2.增大虚拟机内存

3.关掉不用的程序,节省内存空间

  相关解决方案