华为云AI开发平台ModelArts导入AI应用提示单个模型文件超过5G限制_云淘科技
问题现象 在导入AI应用时，提示单个模型文件大小超过5G限制。 原因分析 在不使用动态加载的情况下，系统对单个模型文件的限制大小为5G，超过时无法进行导入。 处理方法 精简模型文件后，重新导入。 使用动态加载功能进行导入。 图1 使用动态加…
华为云AI开发平台ModelArtsNotebook中使用Conda安装Keras 2.3.1报错_云淘科技
问题现象 使用Conda安装Keras 2.3.1版本报错。 原因分析 可能是Conda网络不通，请使用pip install命令安装。 解决方法 执行 !pip install keras==2.3.1命令安装Keras。 父主题： 环境…
华为云AI开发平台ModelArts创建新版Notebook无法使用已购买的专属资源池，如何解决？_云淘科技
问题现象 已购买专属资源池，但创建Notebook时该资源池不可选择，无法创建Notebook。 提示当前专属资源池未初始化开发环境，请到专属资源池页面初始化开发环境。 原因分析 新购买的专属资源池，需要初始化环境才能用于创建Noteboo…
华为云AI开发平台ModelArts服务启动失败_云淘科技
问题现象 当服务事件中出现如下事件时，表示容器启动失败。 图1 服务启动失败 原因分析 服务启动失败的原因比较多样，可能有如下几种情况： AI应用本身问题，无法启动 镜像中配置的端口错误 健康检查配置有问题 模型推理代码customize_…
华为云AI开发平台ModelArts创建Notebook实例后无法打开页面，如何处理？_云淘科技
如果您在创建Notebook实例之后，打开Notebook时，因报错导致无法打开页面，您可以根据以下对应的错误码来排查解决。 打开Notebook显示黑屏 Notebook打开后黑屏，由于代理问题导致，切换代理。 打开Notebook显示空…
华为云AI开发平台ModelArts日志提示“No space left on device”_云淘科技
问题现象 训练过程中拷贝数据/代码/模型时出现如下报错： 图1 错误日志 原因分析 出现该问题的可能原因如下。 磁盘空间不足。 分布式作业时，有些节点的docker base size配置未生效，容器内“/”根目录空间未达到50G，只有默认…
华为云AI开发平台ModelArtsTensorFlow模型转换失败_云淘科技
问题现象 使用TensorFlow框架编写的模型，在运行模型转换任务时，任务失败，且报错日志信息如下： 解决方法 针对模型转换失败的任务，请根据如下排除指导进行排查。 检查当前帐号是否具备转换任务中“转换输入目录”和“转换输出目录”的权限。…
华为云AI开发平台ModelArts创建Notebook失败，查看事件显示JupyterProcessKilled_云淘科技
问题现象 创建Notebook失败，查看事件显示JupyterProcessKilled。 图1 查看事件 原因分析 出现此故障是因为Jupyter进程被清理掉了，一般情况Notebook会自动重启的，如果没有自动重启，创建一直失败，请确认…
华为云AI开发平台ModelArts在Notebook中使用tensorboard命令打开日志文件报错Permission denied_云淘科技
问题现象 在Notebook的Terminal中执行tensorboard –logdir ./命令，报错[Errno 13] Permission denied……。 原因分析 当前目录下包含没有权限的文件。 解决方法 建议用…
华为云AI开发平台ModelArtsOOM导致训练作业失败_云淘科技
问题现象 因为OOM导致的训练作业失败，会有如下几种现象： 错误码返回137，如下图所示： 图1 错误日志 日志中有报错，含有“killed”相关字段，例如如下截图： 图2 错误日志信息 日志中有报错“RuntimeError: CUDA …
