华为云AI开发平台ModelArts训练前卡死_云淘科技
作业为多节点训练，且还未开始训练时发生卡死，可以在代码中加入os.environ[“NCCL_DEBUG”] = “INFO”，查看NCCL DEBUG信息。 问题现象1 日志中还未出现NCC…
华为云AI开发平台ModelArts自定义镜像模型部署为在线服务时出现异常_云淘科技
问题现象 在部署在线服务时，部署失败。进入在线服务详情页面，“事件”页签，提示“failed to pull image, retry later”，同时在“日志”页签中，无任何信息。 解决方法 出现此问题现象，通常是因为您部署的模型过大导…
华为云AI开发平台ModelArts训练中途卡死_云淘科技
问题现象1 检测每个节点日志是否有报错信息，某个节点报错但作业未退出导致整个训练作业卡死。 解决方案1 查看报错原因，解决报错。 问题现象2 作业卡在sync-batch-norm中或者训练速度变慢。pytorch如果开了sync-batc…
华为云AI开发平台ModelArts下载并安装ToolKit工具_云淘科技
在使用PyCharm ToolKit之前，您需要根据如下操作指导完成在PyCharm中的安装配置。 前提条件 本地已安装2019.2及以上版本的PyCharm社区版或专业版。 使用PyCharm ToolKit远程连接Notebook开发环…
华为云AI开发平台ModelArtsPyCharm手动连接Notebook_云淘科技
本地IDE环境支持Pycharm和VS Code。通过简单配置，即可用本地IDE远程连接到ModelArts的Notebook开发环境中，调试和运行代码。 本章节介绍基于PyCharm环境访问Notebook的方式。 前提条件 本地已安装2…
华为云AI开发平台ModelArts上传本地小文件（100MB以内）至JupyterLab_云淘科技
对于大小不超过100MB的文件直接上传，并展示文件大小、上传进度及速度等详细信息。 图1 上传100MB以下小文件 文件上传完成后给出提示。 图2 上传成功 父主题： 上传本地文件至JupyterLab 同意关联代理商云淘科技，购买华为云产…
华为云AI开发平台ModelArts查看训练日志_云淘科技
本章节介绍如何查看训练作业产生的日志。 在OBS中查看 提交训练作业时，系统将自动在您配置的OBS Path中，使用作业名称创建一个新的文件夹，用于存储训练输出的模型、日志和代码。 例如“train-job-01”作业，提交作业时会在“te…
华为云AI开发平台ModelArts上传/下载自定义算子_云淘科技
上传自定义算子 单击上传自定义算子图标，从本地上传新算子，如图1所示，当前版本仅支持上传使用Notebook编写的ipynb文件、python脚本。 图1 上传自定义算子 下载自定义算子 对算子单击右键，选择“下载”，即可将算子下载到本地，…
华为云AI开发平台ModelArts饼形图_云淘科技
概述 对数据集的某一列，画出对应的饼形图。 输入 参数 子参数 参数说明 inputs dataframe inputs为字典类型，dataframe为pyspark中的DataFrame类型对象 输出 无 参数说明 参数 子参数 参数说明…
华为云AI开发平台ModelArts数据集聚合_云淘科技
概述 对数据集进行各种聚合运算，包括求平均值、最大值、最小值、方差，对某些列执行分组操作。 输入 参数 子参数 参数说明 inputs dataframe inputs为字典类型，dataframe为pyspark中的DataFrame类型…
