标签： OOM导致训练作业失败

问题现象 因为OOM导致的训练作业失败，会有如下几种现象： 错误码返回137，如下图所示： 图1 错误日志 日志中有报错，含有“killed”相关字段，例如如下截图： 图2 错误日志信息 日志中有报错“RuntimeError: CUDA …