本章节介绍如何控制ModelArts用户权限,限制用户使用Modelarts公共资源池的资源创建训练作业、创建开发环境实例,部署推理服务等。 场景介绍 对于ModelArts专属资源池的用户,不允许使用公共资源池创建训练作业、创建Noteb…
精度问题是指模型从GPU设备迁移到昇腾NPU设备之后由于软硬件差异引入的精度问题。根据是否在单卡环境下,可分为单卡精度问题与多卡精度问题。多卡相对于单卡,会有卡与卡之间的通信,这可能也是精度偏差的一种来源。所以多卡的精度对齐问题相对于单卡会…
购买弹性文件服务SFS 弹性文件服务默认为按需计费,即按购买的存储容量和时长收费。您也可以购买包年包月套餐,提前规划资源的使用额度和时长。在欠费时,您需要及时(15天之内)续费以避免您的文件系统资源被清空。SFS购买指导请参考如何购买弹性文…
本文为您介绍如何通过AI Gallery订阅ChatGLM系列算法,并通过ModelArts进行算法的训练微调和模型的推理部署。 场景介绍 ChatGLM-6B是一个开源的、支持中英双语问答的对话语言模型,基于 General Langua…
问题现象 图1 报错信息 原因分析 transformers库的tranining_args.py目前适配的是CUDA的部分操作,需要替换为适配NPU的脚本。 处理方法 tranining_args.py替换为适配NPU的脚本,替换的脚本请…
第三方案例来源为华为云开发者社区“云驻计划”。由于ModelArts产品的持续更新和迭代,第三方案例中的界面和步骤可能因时效性而与最新产品有所差异,仅供学习和参考。 表1 第三方案例列表 分类 文章名称 作者 自动学习 2步打通ModelA…
问题现象 报错提示OSError: [Errno 122] Disk quota exceeded。 原因分析 默认情况下,下载数据集缓存目录为“~/.cache/huggingface/dataset”,Huggingface缓存目录空间…
ModelArts使用过程中涉及到OBS、SWR等服务交互,需要用户配置委托授权,允许ModelArts访问这些依赖服务。若没有授权,ModelArts的部分功能将不能正常使用。 约束与限制 只有主帐号可以使用委托授权,可以为当前帐号授权,…
ModelArts作为顶层服务,其部分功能依赖于其它服务的访问权限。本章节主要介绍对于IAM子用户使用ModelArts时,如何根据需要开通的功能配置子用户相应权限。 权限列表 子用户的权限,由主用户来控制,主用户通过IAM的权限配置功能设…
防护原理 DDoS高防通过高防IP代理源IP对外提供服务,将所有的公网流量都引流至高防IP,进而隐藏源站,避免源站(用户业务)遭受大流量DDoS攻击。 DDoS高防支持防护的对象:域名,华为云、非华为云或云下的Web业务 Web应用防火墙通…