断点续传上传(HarmonyOS SDK)
功能说明
断点续传上传基于分段上传实现,适用于大文件上传场景。SDK 按指定的分段大小将本地文件切片,并发上传各段,合并完成对象写入。开启断点续传后,上传中断可依据检查点文件续传未完成段,避免全量重传。
接口约束
- 您必须是桶拥有者或拥有上传对象的权限,才能上传对象。建议使用IAM或桶策略进行授权,如果使用IAM则需授予obs:object:PutObject权限,如果使用桶策略则需授予PutObject权限。相关授权方式介绍可参见OBS权限控制概述,配置方式详见使用IAM自定义策略、配置对象策略。
- OBS支持的Region与Endpoint的对应关系,详细信息请参见地区与终端节点。
- 断点续传上传接口传入的文件大小至少要100K以上。
- 使用SDK的断点续传接口时,必须开启断点续传选项后才能在进程再次进入时读取上一次上传的进度。
方法定义
1 | uploadFile(input: UploadFileInput): Response<CompleteMultipartUploadOutput> |
请求参数
| 参数名称 | 参数类型 | 是否必选 | 描述 |
|---|---|---|---|
| input | 必选 | 参数解释: 断点续传上传接口入参,详见UploadFileInput。 |
| 参数名称 | 参数类型 | 是否必选 | 描述 |
|---|---|---|---|
| Bucket | string | 必选 | 参数解释: 桶名。 约束限制:
默认取值: 无 |
| Key | string | 必选 | 参数解释: 对象名。对象名是对象在存储桶中的唯一标识。对象名是对象在桶中的完整路径,路径中不包含桶名。 例如,您对象的访问地址为examplebucket.obs.cn-north-4.myhuaweicloud.com/folder/test.txt 中,对象名为folder/test.txt。 取值范围: 长度大于0且不超过1024的字符串。 默认取值: 无 |
| SourceFile | string | 可选 | 参数解释: 待上传的本地文件路径。 默认取值: 无 |
| PartSize | number | 可选 | 参数解释: 分段大小,单位字节。 取值范围: 最小100KB,最大5GB。 默认取值: 9MB(9437184)。段数超10000时按文件大小/10000自动重算。 |
| TaskNum | number | 可选 | 参数解释: 并发上传段数。 默认取值: 1。调大可加快上传但占用更多内存与带宽。 |
| EnableCheckpoint | boolean | 可选 | 参数解释: 是否开启断点续传落盘。 默认取值: false。开启后上传中断可依据检查点续传。 |
| CheckpointFile | string | 可选 | 参数解释: 检查点文件路径,EnableCheckpoint为true时必填。 默认取值: 无。 |
| ProgressCallback | ProgressCallback | 可选 | 参数解释: 上传进度回调,按已上传字节数回调。 默认取值: 无。 |
| VerifyCrc64 | boolean | 可选 | 参数解释: 是否端到端CRC64校验。 默认取值:false。 开启后各段CRC64记入检查点,合并后与服务端整对象CRC64比对,失配抛异常。 |
| Acl | 可选 | 参数解释: 创建对象时可指定的预定义ACL,有关访问控制列表(Access Control List,ACL)功能的详细信息可参见ACL功能介绍。 取值范围: 可选择的配置选项参见AclType。 默认取值: 无 | |
| WebsiteRedirectLocation | string | 可选 | 参数解释: 当桶设置了Website配置,可以将获取这个对象的请求重定向到桶内另一个对象或一个外部的URL。 例如,重定向请求到桶内另一对象: WebsiteRedirectLocation:/anotherPage.html 或重定向请求到一个外部URL: WebsiteRedirectLocation:http://www.example.com/ OBS将这个值从头域中取出,保存在对象的元数据“WebsiteRedirectLocation”中。 约束限制:
默认取值: 无 |
| ContentType | string | 可选 | 参数解释: 待上传对象的文件类型(MIME类型)。Content-Type(MIME)用于标识发送或接收数据的类型,浏览器根据该参数来决定数据的打开方式。 取值范围: 常见的Content-Type(MIME)列表请参见如何理解Content-Type(MIME)。 默认取值: 如果您在上传Object时未指定Content-Type,SDK会根据指定Object名称的后缀名来判定文件类型并自动填充Content-Type。 |
| SseKms | string | 作为请求参数时必选 | 参数解释: 表示服务端加密是SSE-KMS方式。对象使用SSE-KMS方式加密。 取值范围: 可选值:kms,即选择SSE-KMS方式加密对象。 默认取值: 无 |
| SseKmsKey | string | 作为请求参数时可选 | 参数解释: SSE-KMS加密方式下使用的KMS主密钥的ID值。 取值范围: 有效值支持两种格式:
其中:
默认取值:
|
| SseC | string | 作为请求参数时必选 | 参数解释: 表示服务端加密是SSE-C方式。对象使用SSE-C加密方式。 取值范围: 可选值:AES256,即选择SSE-C方式加密对象。 默认取值: 无 |
| SseCKey | string | 作为请求参数时必选 | 参数解释: SSE-C方式下加密使用的密钥,该密钥用于加密对象。 约束限制: 该头域由256bit的密钥经过Base64编码得到,示例:K7QkYpBkM5+hca27fsNkUnNVaobncnLht/rCB2o/9Cw=。 默认取值: 无 |
| SseCKeyMd5 | string | 作为请求参数时可选 | 参数解释: SSE-C方式下加密使用密钥的MD5值,该值用于验证密钥传输过程中是否出错。 约束限制: 由密钥值经过MD5加密再经过Base64编码后得到,示例:4XvB3tbNTN+tIEVa0/fGaQ==。 默认取值: 无 |
| StorageClass | 可选 | 参数解释: 创建对象时,可以加上此头域设置对象的存储类型。 取值范围: 可选择的存储类型参见StorageClassType。 默认取值: 如果未设置此头域,则以桶的默认存储类型作为对象的存储类型。 | |
| Metadata | object | 可选 | 参数解释: 待上传对象的自定义元数据。OBS支持用户使用以“x-obs-meta-”开头的消息头来加入自定义的元数据,以便对对象进行自定义管理。当用户获取此对象或查询此对象元数据时,加入的自定义元数据将会在返回的消息头中出现。 约束限制:
默认取值: 无 |
| Expires | number | 可选 | 参数解释: 表示对象的过期时间(从对象最后修改时间开始计算),过期之后对象会被自动删除。 取值范围: 1~(263-1),单位:天。 默认取值: 无 |
| CallbackUrl | string | 可选 | 参数解释: 上传回调地址,透传至合并段。 默认取值: 无。 |
| CallbackHost | string | 可选 | 参数解释: 上传回调Host。 默认取值: 无。 |
| CallbackBody | string | 可选 | 参数解释: 上传回调请求体。 默认取值: 无。 |
| CallbackBodyType | string | 可选 | 参数解释: 上传回调请求体类型。 默认取值: 无。 |
| 常量名 | 原始值 | 说明 |
|---|---|---|
| PRIVATE | private | 私有读写。 桶或对象的所有者拥有完全控制的权限,其他任何人都没有访问权限。 |
| PUBLIC_READ | public-read | 公共读私有写。 设在桶上,所有人可以获取该桶内对象列表、桶内多段任务、桶的元数据、桶的多版本。 设在对象上,所有人可以获取该对象内容和元数据。 |
| PUBLIC_READ_WRITE | public-read-write | 公共读写。 设在桶上,所有人可以获取该桶内对象列表、桶内多段任务、桶的元数据、桶的多版本、上传对象、删除对象、初始化段任务、上传段、合并段、复制段、取消多段上传任务。 设在对象上,所有人可以获取该对象内容和元数据。 |
| PUBLIC_READ_DELIVERED | public-read-delivered | 桶公共读,桶内对象公共读。 设在桶上,所有人可以获取该桶内对象列表、桶内多段任务、桶的元数据、桶的多版本,可以获取该桶内对象的内容和元数据。 说明: AclPublicReadDelivered不能应用于对象。 |
| PUBLIC_READ_WRITE_DELIVERED | public-read-write-delivered | 桶公共读写,桶内对象公共读写。 设在桶上,所有人可以获取该桶内对象列表、桶内多段任务、桶的元数据、桶的多版本、上传对象、删除对象、初始化段任务、上传段、合并段、复制段、取消多段上传任务,可以获取该桶内对象的内容和元数据。 说明: AclPublicReadWriteDelivered不能应用于对象。 |
| BUCKET_OWNER_FULL_CONTROL | bucket-owner-full-control | 设在对象上,桶和对象的所有者拥有对象的完全控制权限,其他任何人都没有访问权限。 默认情况下,上传对象至其他用户的桶中,桶拥有者没有对象的控制权限。对象拥有者为桶拥有者添加此权限控制策略后,桶所有者可以完全控制对象。例如,用户A上传对象x至用户B的桶中,系统默认用户B没有对象x的控制权。当用户A为对象x设置bucket-owner-full-control策略后,用户B就拥有了对象x的控制权。 |
返回结果
| 参数名称 | 参数类型 | 描述 |
|---|---|---|
| CommonMsg | 参数解释: 接口调用完成后的公共信息,包含HTTP状态码,操作失败的错误码等,详见ICommonMsg。 | |
| InterfaceResult | 参数解释: 操作成功后的结果数据,详见PutObjectOutput。 约束限制: 当Status大于300时为空。 |
| 参数名称 | 参数类型 | 描述 |
|---|---|---|
| Status | number | 参数解释: OBS服务端返回的HTTP状态码。 取值范围: 状态码是一组从2xx(成功)到4xx或5xx(错误)的数字代码,状态码表示了请求响应的状态。完整的状态码列表请参见状态码。 |
| Code | string | 参数解释: OBS服务端返回的错误码。 |
| Message | string | 参数解释: OBS服务端返回的错误描述。 |
| HostId | string | 参数解释: OBS服务端返回的请求服务端ID。 |
| RequestId | string | 参数解释: OBS服务端返回的请求ID。 |
| Id2 | string | 参数解释: OBS服务端返回的请求ID2。 |
| Indicator | string | 参数解释: OBS服务端返回的详细错误码。 |
| 参数名称 | 参数类型 | 描述 |
|---|---|---|
| RequestId | string | 参数解释: OBS服务端返回的请求ID。 默认取值: 无 |
| ETag | string | 参数解释: 合并段后根据各个段的ETag值计算出的结果。对象的base64编码的128位MD5摘要。ETag是对象内容的唯一标识,可以通过该值识别对象内容是否有变化。比如上传对象时ETag为A,下载对象时ETag为B,则说明对象内容发生了变化。ETag只反映变化的内容,而不是其元数据。上传的对象或复制操作创建的对象,都有唯一的ETag。 约束限制: 当对象是服务端加密的对象时,ETag值不是对象的MD5值。 取值范围: 长度为32的字符串。 默认取值: 无 |
| Bucket | string | 参数解释: 合并段所在的桶名。 约束限制:
默认取值: 无 |
| Key | string | 参数解释: 对象名。对象名是对象在存储桶中的唯一标识。对象名是对象在桶中的完整路径,路径中不包含桶名。 例如,您对象的访问地址为examplebucket.obs.cn-north-4.myhuaweicloud.com/folder/test.txt 中,对象名为folder/test.txt。 取值范围: 长度大于0且不超过1024的字符串。 默认取值: 无 |
| Location | string | 参数解释: 合并段后得到的对象的url。 例如:https://example-Bucket.obs.regions.myhuaweicloud.com/example-Object。 默认取值: 无 |
| VersionId | string | 参数解释: 合并段后得到的对象版本号。如果桶的多版本状态为开启,则会返回对象的版本号。 取值范围: 长度为32的字符串。 默认取值: 无 |
| SseKms | string | 参数解释: 表示服务端加密是SSE-KMS方式。对象使用SSE-KMS方式加密。 取值范围: 可选值:kms,即选择SSE-KMS方式加密对象。 默认取值: 无 |
| SseKmsKey | string | 参数解释: SSE-KMS加密方式下使用的KMS主密钥的ID值。 取值范围: 有效值支持两种格式:
其中:
默认取值:
|
| SseC | string | 参数解释: 表示服务端加密是SSE-C方式。对象使用SSE-C加密方式。 取值范围: 可选值:AES256,即选择SSE-C方式加密对象。 默认取值: 无 |
| SseCKeyMd5 | string | 参数解释: SSE-C方式下加密使用密钥的MD5值,该值用于验证密钥传输过程中是否出错。 约束限制: 由密钥值经过MD5加密再经过Base64编码后得到,示例:4XvB3tbNTN+tIEVa0/fGaQ==。 默认取值: 无 |
| EncodingType | string | 参数解释: 用于指定对响应中的Key进行指定类型的编码。如果Key包含xml 1.0标准不支持的控制字符,可通过设置该参数对响应中的Key进行编码。 取值范围: 可选值为url。 默认取值: 无,不设置则不编码。 |
代码示例
本示例将本地文件 local.txt 断点续传上传到 examplebucket 桶的 objectname 对象,开启断点续传与进度回调。
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 | // 引入依赖包 import ObsClient, { UploadFileInput } from '@obs/esdk-obs-harmony'; import { process } from '@kit.ArkTS'; import { BusinessError } from '@kit.BasicServicesKit'; import { hilog } from '@kit.PerformanceAnalysisKit'; const processManager = new process.ProcessManager(); // 创建ObsClient实例 const obsClient = new ObsClient({ // 推荐通过环境变量获取AKSK,这里也可以使用其他外部引入方式传入,如果使用硬编码可能会存在泄露风险 // 您可以登录访问管理控制台获取访问密钥AK/SK,获取方式请参见https://support.huaweicloud.com/usermanual-ca/ca_01_0003.html AccessKeyId: processManager.getEnvironmentVar("ACCESS_KEY_ID"), SecretAccessKey: processManager.getEnvironmentVar("SECRET_ACCESS_KEY"), // 【可选】如果使用临时AK/SK和SecurityToken访问OBS,同样建议您尽量避免使用硬编码,以降低信息泄露风险。您可以通过环境变量获取访问密钥AK/SK,也可以使用其他外部引入方式传入 // SecurityToken: processManager.getEnvironmentVar("SECURITY_TOKEN"), // Server填写Bucket对应的Endpoint, 这里以华北-北京四为例,其他地区请按实际情况填写 Server: "https://obs.cn-north-4.myhuaweicloud.com", }); async function uploadFile() { try { const params: UploadFileInput = { Bucket: "examplebucket", Key: "objectname", SourceFile: "/path/to/local.txt", PartSize: 9 * 1024 * 1024, TaskNum: 5, EnableCheckpoint: true, CheckpointFile: "/path/to/upload.cp", ProgressCallback: (transferred, total, seconds) => { hilog.info(0x0001, 'OBS-Harmony', "uploaded %d / %d bytes (%ds)", transferred, total, seconds); }, }; const result = await obsClient.uploadFile(params); if (result.CommonMsg.Status < 300) { hilog.info(0x0001, 'OBS-Harmony', "UploadFile successful! ETag: %s", result.InterfaceResult?.ETag); return; } hilog.error(0x0001, 'OBS-Harmony', "An ObsError was found, which means your request sent to OBS was rejected with an error response."); hilog.error(0x0001, 'OBS-Harmony', "Status: %d", result.CommonMsg.Status); hilog.error(0x0001, 'OBS-Harmony', "Code: %s", result.CommonMsg.Code); hilog.error(0x0001, 'OBS-Harmony', "Message: %s", result.CommonMsg.Message); hilog.error(0x0001, 'OBS-Harmony', "RequestId: %s", result.CommonMsg.RequestId); } catch (error) { const err = error as BusinessError; hilog.error(0x0001, 'OBS-Harmony', 'An Exception occurred: code=%d, message: %s', err.code, err.message); } } uploadFile(); |