华为云AI开发平台ModelArts拷贝数据卡死_云淘科技
问题现象 调用mox.file.copy_parallel拷贝数据时卡死。 解决方案 拷贝文件和文件夹均可采用： import moxing as mox mox.file.set_auth(is_secure=False) 拷贝单个大文件…
华为云AI开发平台ModelArts通过OBS创建AI应用时，构建日志中提示pip下载包失败_云淘科技
问题现象 通过OBS创建AI应用构建失败，查看构建日志，提示pip下载包失败。如下载numpy 1.16版本失败。 原因分析 一般下载包失败时，可能有如下几个原因： pip源中不存在该包，当前默认pip源为pypi.org中的包，请在pyp…
华为云AI开发平台ModelArtsmoxing.tensorflow是否包含整个TensorFlow，如何对生成的checkpoint进行本地Fine Tune？_云淘科技
问题现象 使用MoXing训练模型，“global_step”放在Adam名称范围下，而非MoXing代码中没有Adam名称范围，如图1所示。其中1为使用MoXing代码，2代表非MoXing代码。 图1 代码示例 处理方法 Fine Tu…
华为云AI开发平台ModelArtsNotebook无法执行代码，如何处理？_云淘科技
当Notebook出现无法执行时，您可以根据如下几种情况判断并处理。 如果只是Cell的执行过程卡死或执行时间过长，如图1中的第2个和第3个Cell，导致第4个Cell无法执行，但整个Notebook页面还有反应，其他Cell也还可以点击，…
华为云AI开发平台ModelArts训练作业使用MoXing拷贝数据较慢，重复打印日志_云淘科技
问题现象 ModelArts训练作业使用MoXing拷贝数据较慢。 重复打印日志 INFO:root:Listing OBS。 图1 重复打印日志 原因分析 拷贝数据慢的可能原因如下： 直接从OBS上读数据会造成读数据变成训练的瓶颈，导致迭…
华为云AI开发平台ModelArts日志提示“errorMessage:The specified key does not exist”_云淘科技
问题现象 在用moxing访问OBS路径时，出现如下错误： ERROR:root: stat:404 errorCode:NoSuchKey errorMessage:The specified key does not exist. 原因…
华为云AI开发平台ModelArtsMXNet创建kvstore时程序被阻塞，无报错_云淘科技
问题现象 使用kv_store = mxnet.kv.create(‘dist_async’)方式创建“kvstore”时程序被阻塞。如，执行如下代码，如果无法输出“end”，表明程序阻塞。 print(‘start…
华为云AI开发平台ModelArtsMoXing如何访问文件夹并使用get_size读取文件夹大小？_云淘科技
问题现象 使用MoXing无法访问文件夹。 使用MoXing的“get_size”读取文件夹大小，显示为0。 原因分析 使用MoXing访问文件夹，需添加参数：“recursive=True”，默认为False。 处理方法 获取一个OBS文…
华为云AI开发平台ModelArts运行训练代码，出现dead kernel，并导致实例崩溃_云淘科技
在Notebook实例中运行训练代码，如果数据量太大或者训练层数太多，亦或者其他原因，导致出现“内存不够”问题，最终导致该容器实例崩溃。 出现此问题后，系统将自动重启Notebook，来修复实例崩溃的问题。此时只是解决了崩溃问题，如果重新运…
华为云AI开发平台ModelArts训练作业找不到GPU_云淘科技
问题现象 训练作业运行出现如下报错： failed call to cuInit: CUDA_ERROR_NO_DEVICE: no CUDA-capable device is detected 原因分析 根据错误信息判断，报错原因为训练…
