华为云对象存储OBS分段上传-列举分段上传任务(Python SDK)_云淘科技

功能说明

列举指定桶中所有的初始化后还未合并或还未取消的分段上传任务。

通过列举桶中的多段上传任务,您可以获得已初始化多段上传任务的列表,已初始化多段上传任务是指初始化后还未合并以及未取消的多段上传任务。每个请求将返回最多1000个多段上传任务,如果正在进行的多段上传任务超过1000个,您需要发送其他请求以检索剩余的多段上传任务。

接口约束

您必须是桶拥有者或拥有列举分段上传任务的权限,才能列举分段上传任务。建议使用IAM或桶策略进行授权,如果使用IAM则需授予obs:bucket:ListBucketMultipartUploads权限,如果使用桶策略则需授予ListBucketMultipartUploads权限。相关授权方式介绍可参见OBS权限控制概述,配置方式详见使用IAM自定义策略、配置对象策略。
OBS支持的Region与Endpoint的对应关系,详细信息请参见地区与终端节点。
您必须得到可以对桶执行ListBucketMultipartUploads操作的权限,才能列出正在上传到该桶的多段上传。
默认情况下,允许桶所有者和多段上传任务的发起者执行此操作。除了默认情况之外,桶所有者可以允许其他委托人对桶执行ListBucketMultipartUploads操作。

方法定义

ObsClient.listMultipartUploads(bucketName, multipart)

请求参数

表1 请求参数列表

参数名称

参数类型

是否必选

描述

bucket

str

必选

参数解释

桶名。

约束限制:

桶的名字需全局唯一,不能与已有的任何桶名称重复,包括其他用户创建的桶。
桶命名规则如下:

3~63个字符,数字或字母开头,支持小写字母、数字、“-”、“.”。
禁止使用IP地址。
禁止以“-”或“.”开头及结尾。
禁止两个“.”相邻(如:“my..bucket”)。
禁止“.”和“-”相邻(如:“my-.bucket”和“my.-bucket”)。

同一用户在同一个区域多次创建同名桶不会报错,创建的桶属性以第一次请求为准。

默认取值:

multipart

ListMultipartUploadsRequest

可选

参数解释

列举分段上传任务请求参数。ListMultipartUploadsRequest。

encoding_type

str

可选

参数解释:

用于指定对响应中的Key进行指定类型的编码。如果Key包含xml 1.0标准不支持的控制字符,可通过设置该参数对响应中的Key进行编码。

取值范围:

可选值为url。

默认取值:

无,不设置则不编码。

表2 ListMultipartUploadsRequest

参数名称

参数类型

是否必选

描述

prefix

str

可选

参数解释:

限定返回的分段上传任务中的对象名必须带有prefix前缀。

例如,假设您拥有以下对象:logs/day1、logs/day2、logs/day3和ExampleObject.jpg。如果您将logs/指定为前缀,将返回以字符串“logs/”开头的三个对象所在的分段上传任务。如果您指定空的前缀且请求中没有其他过滤条件,将返回桶中的所有分段上传任务。

约束限制:

长度大于0且不超过1024的字符串。

默认取值:

max_uploads

int

str

可选

参数解释:

列举分段上传任务的最大数目。

约束限制:

当该参数超出1000时,按照默认的1000进行处理。

取值范围:

1~1000,单位:个。

默认取值:

1000

delimiter

str

可选

参数解释:

对分段上传任务中的对象名进行分组的字符。通常与前缀prefix搭配使用,如果指定了prefix,从prefix到第一次出现delimiter间具有相同字符串的对象名会被分成一组,形成一条CommonPrefix;如果没有指定prefix,从对象名的首字符到第一次出现delimiter间具有相同字符串的对象名会被分成一组,形成一条CommonPrefix。

例如,桶中有3个对象,分别为abcd、abcde、bbcde。如果指定delimiter为d,prefix为a,abcd、abcde会被分成一组,形成一条前缀为abcd的CommonPrefix;如果只指定delimiter为d,abcd、abcde会被分成一组,形成一条前缀为abcd的CommonPrefix,而bbcde会被单独分成一组,形成一条前缀为bbcd的CommonPrefix。

取值范围:

长度大于0且不超过1024的字符串。

默认取值:

key_marker

str

可选

参数解释:

列举分段上传任务的起始位置。表示列举时返回指定的key_marker之后的分段上传任务。

取值范围:

上次请求返回体的nextKeyMarker值。

默认取值:

upload_id_marker

str

可选

参数解释:

列举分段上传任务的起始位置(uploadId标识)。

约束限制:

只有与key_marker参数一起使用时才有意义,即列举时返回指定keyMarker的uploadIdMarker之后的分段上传任务。

取值范围:

对象的分段上传任务ID,即上次请求返回体的nextUploadIdMarker值。

默认取值:

返回结果

表3 返回结果

类型

说明

GetResult

参数解释:

SDK公共结果对象。

表4 GetResult

参数名称

参数类型

描述

status

int

参数解释:

HTTP状态码。

取值范围:

状态码是一组从2xx(成功)到4xx或5xx(错误)的数字代码,状态码表示了请求响应的状态。完整的状态码列表请参见状态码。

默认取值:

reason

str

参数解释:

HTTP文本描述。

默认取值:

errorCode

str

参数解释:

OBS服务端错误码,当status参数小于300时为空。

默认取值:

errorMessage

str

参数解释:

OBS服务端错误描述,当status参数小于300时为空。

默认取值:

requestId

str

参数解释:

OBS服务端返回的请求ID。

默认取值:

indicator

str

参数解释:

OBS服务端返回的错误定位码。

默认取值:

hostId

str

参数解释:

请求的服务端ID,当status参数小于300时为空。

默认取值:

resource

str

参数解释:

发生错误时相关的桶或对象,当status参数小于300时为空。

默认取值:

header

list

参数解释:

响应消息头列表,由多个元组构成。每个元组均包含两个元素,代表响应头的键值对。

默认取值:

body

object

参数解释:

操作成功后的结果数据,当status大于300时为空。该值根据调用接口的不同而不同,参见“桶相关接口”章节和“对象相关接口”章节的详细描述。

默认取值:

表5 GetResult.body

GetResult.body类型

说明

ListMultipartUploadsResponse

参数解释:

列举桶内分段上传任务响应结果。

表6 ListMultipartUploadsResponse

参数名称

参数类型

描述

bucket

str

参数解释

桶名。

约束限制:

桶的名字需全局唯一,不能与已有的任何桶名称重复,包括其他用户创建的桶。
桶命名规则如下:

3~63个字符,数字或字母开头,支持小写字母、数字、“-”、“.”。
禁止使用IP地址。
禁止以“-”或“.”开头及结尾。
禁止两个“.”相邻(如:“my..bucket”)。
禁止“.”和“-”相邻(如:“my-.bucket”和“my.-bucket”)。

同一用户在同一个区域多次创建同名桶不会报错,创建的桶属性以第一次请求为准。

默认取值:

keyMarker

str

参数解释:

列举分段上传任务的起始位置,与请求中的该参数对应。

取值范围:

长度大于0且不超过1024的字符串。

默认取值:

uploadIdMarker

str

参数解释:

列举分段上传任务的起始位置(uploadId标识),与请求中的该参数对应。

取值范围:

长度大于0且不超过32的字符串。

默认取值:

nextKeyMarker

str

参数解释:

下次列举分段上传任务请求的起始位置。如果本次没有返回全部结果,响应请求中将包含该元素,用于标明接下来请求的key_marker值。

取值范围:

长度大于0且不超过1024的字符串。

默认取值:

nextUploadIdMarker

str

参数解释:

下次列举分段上传任务请求的起始位置(uploadId标识)。与nextKeyMarker配合使用。如果本次没有返回全部结果,响应请求中将包含该元素,用于标明接下来请求的upload_id_marker值。

取值范围:

长度大于0且不超过32的字符串。

默认取值:

maxUploads

int

参数解释:

列举分段上传任务的最大数目,与请求中的该参数对应。

约束限制:

当该参数超出范围时,按照默认的1000进行处理。

取值范围:

1~1000,单位:个。

默认取值:

1000

isTruncated

bool

参数解释:

表明本次请求是否返回了全部结果。

取值范围:

true:表示没有返回全部结果。
false:表示已返回了全部结果。

默认取值:

prefix

str

参数解释:

分段上传任务中的对象名前缀,与请求中的该参数对应。限定返回的分段上传任务中的对象名必须带有prefix前缀。

例如,假设您拥有以下对象:logs/day1、logs/day2、logs/day3和ExampleObject.jpg。如果您将logs/指定为前缀,将返回以字符串“logs/”开头的三个对象所在的分段上传任务。如果您指定空的前缀且请求中没有其他过滤条件,将返回桶中的所有分段上传任务。

约束限制:

长度大于0且不超过1024的字符串。

默认取值:

delimiter

str

参数解释:

用于对分段上传任务中的对象名进行分组的字符,与请求中的该参数对应。通常与前缀prefix搭配使用,如果指定了prefix,从prefix到第一次出现delimiter间具有相同字符串的对象名会被分成一组,形成一条CommonPrefixes;如果没有指定prefix,从对象名的首字符到第一次出现delimiter间具有相同字符串的对象名会被分成一组,形成一条CommonPrefixes。

例如,桶中有3个对象,分别为abcd、abcde、bbcde。如果指定delimiter为d,prefix为a,abcd、abcde会被分成一组,形成一条前缀为abcd的CommonPrefixes;如果只指定delimiter为d,abcd、abcde会被分成一组,形成一条前缀为abcd的CommonPrefixes,而bbcde会被单独分成一组,形成一条前缀为bbcd的CommonPrefixes。

取值范围:

长度大于0且不超过1024的字符串。

默认取值:

upload

list of Upload

参数解释:

桶内分段上传任务列表,详见Upload。

默认取值:

commonPrefixs

list of CommonPrefix

参数解释:

当请求中设置了delimiter分组字符时,返回按delimiter分组后的对象名称前缀列表。

取值范围:

长度大于0且不超过1024的字符串。

默认取值:

encoding_type

str

参数解释:

用于指定对响应中的key(分段上传任务的对象名)进行指定类型的编码。如果包含xml 1.0标准不支持的控制字符,可通过设置该参数对响应中的key进行编码。

取值范围:

可选值为url。

默认取值:

无,不设置则不编码。

表7 Upload

参数名称

参数类型

描述

key

str

参数解释:

分段上传任务的对象名。对象名是对象在存储桶中的唯一标识。对象名是对象在桶中的完整路径,路径中不包含桶名。

例如,您对象的访问地址为examplebucket.obs.cn-north-4.myhuaweicloud.com/folder/test.txt 中,对象名为folder/test.txt。

取值范围:

长度大于0且不超过1024的字符串。

默认取值:

uploadId

str

参数解释:

分段上传任务的ID,例如:000001648453845DBB78F2340DD460D8

取值范围:

长度大于0且不超过32的字符串。

默认取值:

initiator

Initiator

参数解释:

分段上传任务的创建者。详见Initiator。

默认取值:

owner

Owner

参数解释:

和initiator相同,代表分段上传任务的创建者。详见Owner。

默认取值:

storageClass

str

参数解释:

分段上传的对象的存储类型。

取值范围:

存储类型取值范围参见存储类型。

默认取值:

initiated

str

参数解释:

分段上传任务的初始化时间。

约束限制:

日期格式必须为ISO8601的格式。 例如:2018-01-01T00:00:00.000Z。

代码示例:DateTime(year=2023, month=9, day=12)。

默认取值:

表8 CommonPrefix

参数名称

参数类型

描述

prefix

str

参数解释:

当请求中设置了delimiter分组字符时,返回按delimiter分组后的对象名称前缀列表。

取值范围:

长度大于0且不超过1024的字符串。

默认取值:

表9 Initiator

参数名称

参数类型

是否必选

描述

id

str

作为请求参数时必选

参数解释:

创建者的帐号ID,即domain_id。

取值范围:

如何获取帐号ID请参见获取帐号ID。

默认取值:

name

str

作为请求参数时可选

参数解释:

创建者帐号名。

约束限制:

帐号名不支持中文,只能包含英文字母、数字或特殊字符“-_”,且须以字母开头,帐号名长度支持6~32个字符。

默认取值:

表10 Owner

参数名称

参数类型

是否必选

描述

owner_id

str

作为请求参数时必选

参数解释:

所有者的帐号ID,即domain_id。

取值范围:

如何获取帐号ID请参见如何获取帐号ID和用户ID?

默认取值:

owner_name

str

作为请求参数时可选

参数解释:

所有者的帐号用户名。

取值范围:

如何获取帐号用户名请参见如何获取用户名?

默认取值:

表11 StorageClass

参数名称

参数类型

描述

STANDARD

标准存储

参数解释:

标准存储拥有低访问时延和较高的吞吐量,适用于有大量热点对象(平均一个月多次)或小对象(<1MB),且需要频繁访问数据的业务场景。

WARM

低频访问存储

参数解释:

低频访问存储适用于不频繁访问(平均一年少于12次)但在需要时也要求能够快速访问数据的业务场景。

COLD

归档存储

参数解释:

归档存储适用于很少访问(平均一年访问一次)数据的业务场景。

代码样例

本示例用于列举桶内的分段上传任务。

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
from obs import ObsClient
from obs import ListMultipartUploadsRequest
import os
import traceback

# 推荐通过环境变量获取AKSK,这里也可以使用其他外部引入方式传入,如果使用硬编码可能会存在泄露风险。
# 您可以登录访问管理控制台获取访问密钥AK/SK,获取方式请参见https://support.huaweicloud.com/usermanual-ca/ca_01_0003.html。
ak = os.getenv("AccessKeyID")
sk = os.getenv("SecretAccessKey")
# 【可选】如果使用临时AKSK和SecurityToken访问OBS,则同样推荐通过环境变量获取
security_token = os.getenv("SecurityToken")
#  server填写Bucket对应的Endpoint, 这里以华北-北京四为例,其他地区请按实际情况填写。
server = "https://obs.cn-north-4.myhuaweicloud.com"
# 创建obsClient实例
# 如果使用临时AKSK和SecurityToken访问OBS,需要在创建实例时通过security_token参数指定securityToken值
obsClient = ObsClient(access_key_id=ak, secret_access_key=sk, server=server)
try:
    bucketName = "examplebucket"
    # 限定返回的分段上传任务中的对象名必须带有prefix前缀
    prefix = 'prefix'
    # 列举分段上传任务的最大数目,取值范围为1~1000,当超出范围时,按照默认的1000进行处理,此处为10
    max_uploads = 10
    # 列举桶内分段上传任务请求参数
    multipart = ListMultipartUploadsRequest(prefix=prefix, max_uploads=max_uploads)
    # 列举桶内分段上传任务
    resp = obsClient.listMultipartUploads(bucketName, multipart, encoding_type='url')

    # 返回码为2xx时,接口调用成功,否则接口调用失败
    if resp.status < 300:
        print('List Multipart Uploads Succeeded')
        print('requestId:', resp.requestId)
        print('bucket:', resp.body.bucket)
        print('prefix:', resp.body.prefix)
        print('maxUploads:', resp.body.maxUploads)
        print('isTruncated:', resp.body.isTruncated)
        index = 1
        for upload in resp.body.upload:
            print('upload [' + str(index) + ']')
            print('key:', upload.key)
            print('uploadId:', upload.uploadId)
            print('storageClass:', upload.storageClass)
            print('initiated:', upload.initiated)
            print('owner_id:', upload.owner.owner_id)
            print('owner_name:', upload.owner.owner_name)
            index += 1
    else:
        print('List Multipart Uploads Failed')
        print('requestId:', resp.requestId)
        print('errorCode:', resp.errorCode)
        print('errorMessage:', resp.errorMessage)
except:
    print('List Multipart Uploads Failed')
    print(traceback.format_exc())

相关链接

关于分段上传-列举分段上传任务的API说明,请参见列举桶中已初始化多段任务。
更多关于分段上传的示例代码,请参见Github示例。
分段上传过程中返回的错误码含义、问题原因及处理措施可参考OBS错误码。

父主题: 多段相关接口

同意关联代理商云淘科技,购买华为云产品更优惠(QQ 78315851)

内容没看懂? 不太想学习?想快速解决? 有偿解决: 联系专家