华为云AI开发平台ModelArtsMXNet创建kvstore时程序被阻塞，无报错_云淘科技
问题现象 使用kv_store = mxnet.kv.create(‘dist_async’)方式创建“kvstore”时程序被阻塞。如，执行如下代码，如果无法输出“end”，表明程序阻塞。 print(‘start…
华为云AI开发平台ModelArtsMoXing如何访问文件夹并使用get_size读取文件夹大小？_云淘科技
问题现象 使用MoXing无法访问文件夹。 使用MoXing的“get_size”读取文件夹大小，显示为0。 原因分析 使用MoXing访问文件夹，需添加参数：“recursive=True”，默认为False。 处理方法 获取一个OBS文…
华为云AI开发平台ModelArts运行训练代码，出现dead kernel，并导致实例崩溃_云淘科技
在Notebook实例中运行训练代码，如果数据量太大或者训练层数太多，亦或者其他原因，导致出现“内存不够”问题，最终导致该容器实例崩溃。 出现此问题后，系统将自动重启Notebook，来修复实例崩溃的问题。此时只是解决了崩溃问题，如果重新运…
华为云AI开发平台ModelArts训练作业找不到GPU_云淘科技
问题现象 训练作业运行出现如下报错： failed call to cuInit: CUDA_ERROR_NO_DEVICE: no CUDA-capable device is detected 原因分析 根据错误信息判断，报错原因为训练…
华为云AI开发平台ModelArts日志出现ECC错误，导致训练作业失败_云淘科技
问题现象 训练作业日志运行出现如下报错：RuntimeError: CUDA error: uncorrectable ECC error encountered 原因分析 由于ECC错误，导致作业运行失败，该作业节点会被自动隔离，需要重启…
华为云AI开发平台ModelArts创建AI应用成功后，部署服务报错，如何排查代码问题_云淘科技
问题现象 创建AI应用成功后，部署服务失败，如何定位是模型代码编写有问题。 原因分析 用户自定义镜像或者通过基础镜像导入的AI应用时，用户自己编写了很多自定义的业务逻辑，这些逻辑有问题将会导致服务部署或者预测失败，需要能够排查出哪里有问题。…
华为云AI开发平台ModelArtsModelArts SDK下载文件目标路径设置为文件名，部署服务时报错_云淘科技
问题现象 ModelArts SDK在OBS下载文件时，目标路径设置为文件名，在本地IDE运行不报错，部署为在线服务时报错。 代码如下： session.obs.download_file（obs_path, local_path） 报错信…
华为云AI开发平台ModelArts自动学习训练作业创建失败_云淘科技
出现此问题，一般是因为后台服务故障导致的，建议稍等片刻，然后重新创建训练作业。如果重试超过3次仍无法解决，请联系华为云技术支持。 父主题： 模型训练 同意关联代理商云淘科技，购买华为云产品更优惠（QQ 78315851） 内容没看懂？ 不太…
华为云AI开发平台ModelArts如何解决训练过程中出现的cudaCheckError错误？_云淘科技
问题现象 Notebook中，运行训练代码出现如下错误。 cudaCheckError() failed : no kernel image is available for execution on the device 原因分析 因为编…
华为云AI开发平台ModelArts无法导入模块_云淘科技
问题现象 ModelArts训练作业导入模块时日志报错： Traceback (most recent call last):File “project_dir/main.py”, line 1, in from module_dir im…
