华为云AI开发平台ModelArts上传本地文件或OBS文件到DLI分组资源_云淘科技

ma-cli dli-job upload命令支持将本地文件或OBS文件上传到DLI资源组。

$ ma-cli dli-job upload -h
Usage: ma-cli dli-job upload [OPTIONS] PATHS...

  Upload DLI resource.

  Tips: --obs-path is need when upload local file.

  Example:

  # Upload an OBS path to DLI resource
  ma-cli dli-job upload obs://your-bucket/test.py -g test-group --kind pyFile

  # Upload a local path to DLI resource
  ma-cli dli-job upload ./test.py -g test-group -obs ${your-bucket} --kind pyFile

  # Upload local path and OBS path to DLI resource
  ma-cli dli-job upload ./test.py obs://your-bucket/test.py -g test-group -obs ${your-bucket}

Options:
  -k, --kind [jar|pyFile|file]  DLI resources type.
  -g, --group TEXT              DLI resources group.
  -tags, --tags TEXT            DLI resources tags, follow --tags `key1`=`value1`.
  -obs, --obs-bucket TEXT       OBS bucket for upload local file.
  -async, --is-async            whether to upload resource packages in asynchronous mode. The default value is False.
  -C, --config-file TEXT        Configure file path for authorization.
  -D, --debug                   Debug Mode. Shows full stack trace when error occurs.
  -P, --profile TEXT            CLI connection profile to use. The default profile is "DEFAULT".
  -H, -h, --help                Show this message and exit.
表1 参数说明

参数名

参数类型

是否必选

参数说明

PATHS

String

需要上传到DLI分组资源的本地文件路径或者obs路径,支持同时传入多个路径。

-k / –kind

String

上传文件的类型,支持jar、pyFile和file。

-g / –group

String

上传文件的DLI分组名。

-tags / –tags

String

上传文件的tag。

-obs / –obs-bucket

String

如果上传文件包含本地路径,则需要指定一个OBS桶作为中转。

-async / –is-async

Bool

异步上传文件,推荐使用。

示例

上传本地文件到DLI分组资源

ma-cli dli-job upload ./test.py -obs ${your-bucket} --kind pyFile

上传OBS文件到DLI分组资源

ma-cli dli-job upload obs://your-bucket/test.py --kind pyFile

父主题: 使用ma-cli dli-job命令提交DLI Spark作业

同意关联代理商云淘科技,购买华为云产品更优惠(QQ 78315851)

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家