华为云AI开发平台ModelArtsTensorFlow-1.8作业连接OBS时反复出现提示错误_云淘科技
问题现象 基于TensorFlow-1.8启动训练作业，并在代码中使用“tf.gfile”模块连接OBS，启动训练作业后会频繁打印如下日志信息： Connection has been released. Continuing. Found…
华为云AI开发平台ModelArts使用自定义镜像创建训练作业，找不到启动文件_云淘科技
问题现象 使用旧版训练的自定义镜像创建训练作业，出现如下报错，提示找不到运行的主文件：no such file or directory。 原因分析 根据报错提示可以判断是运行命令的启动文件目录不正确导致运行失败。 处理方法 需要排查执行命…
华为云AI开发平台ModelArts日志文件的大小达到限制_云淘科技
问题现象 ModelArts训练作业在运行过程中报错，提示日志文件的大小已达到限制： modelarts-pope: log length overflow(max:1073741824; already: 107341771; new:9…
华为云AI开发平台ModelArts日志提示“pandas.errors.ParserError: Error tokenizing data. C error: Expected .* fields”_云淘科技
问题现象 使用pandas读取csv数据表时，日志报出如下错误导致训练作业失败： pandas.errors.ParserError: Error tokenizing data. C error: Expected 4 field 原因分…
华为云AI开发平台ModelArts使用预置算法训练时，训练失败，报“bndbox”错误_云淘科技
问题现象 使用预置算法创建训练作业，训练失败，日志中出现如下报错。 KeyError: ‘bndbox’ 原因分析 用于训练的数据集中，使用了“非矩形框”标注。而预置使用算法不支持“非矩形框”标注的数据集。 处理方法 此问题有两种解决方法：…
华为云AI开发平台ModelArtsMoXing_云淘科技
使用MoXing复制数据报错 如何关闭Mox的warmup Pytorch Mox日志反复输出 moxing.tensorflow是否包含整个TensorFlow，如何对生成的checkpoint进行本地Fine Tune？ 训练作业使用M…
华为云AI开发平台ModelArts自动学习训练作业创建失败_云淘科技
出现此问题，一般是因为后台服务故障导致的，建议稍等片刻，然后重新创建训练作业。如果重试超过3次仍无法解决，请联系华为云技术支持。 父主题： 模型训练 同意关联代理商云淘科技，购买华为云产品更优惠（QQ 78315851） 内容没看懂？ 不太…
华为云AI开发平台ModelArtsPytorch1.0引擎提示“RuntimeError: std::exception”_云淘科技
问题现象 在使用pytorch1.0镜像时，必现如下报错： “RuntimeError: std::exception” 原因分析 出现该问题的可能原因如下： pytorch1.0镜像中的libmkldnn软连接与原生torch的冲突，具体…
华为云AI开发平台ModelArts训练作业状态显示“审核作业初始化”_云淘科技
问题现象 当创建训练作业的“算法来源”选择“自定义”镜像创建训练作业时，训练作业状态显示审核作业初始化。 原因分析 自定义镜像首次运行时，需要先审核镜像，通过审核之后才可创建作业，即当前状态为审核作业初始化。 父主题： 业务代码问题 同意关…
华为云AI开发平台ModelArts如何关闭Mox的warmup_云淘科技
问题现象 训练作业mox的Tensorflow版本在运行的时候，会先执行“50steps” 4次，然后才会开始正式运行。 warmup即先用一个小的学习率训练几个epoch（warmup），由于网络的参数是随机初始化的，如果一开始就采用较大…
