对象存储迁移服务 OMS对象存储迁移服务 OMS

更新时间:2021/07/08 GMT+08:00
分享

创建迁移任务

本节介绍创建迁移任务的操作步骤。

适用场景

适用于单个桶数据量不超过3 TB或对象个数不超过500万的对象存储迁移场景,通过创建对象存储迁移任务,可将对象数据进行快速迁移。

如果单个桶数据量大于3 TB或对象个数大于500万,建议您创建迁移任务组来进行迁移。

前提条件

  • 已获取源端和目的端账号的AK/SK。
    • 源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取
    • 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取
  • 已在OBS服务中创建桶。
  • 您过去24小时内已创建的迁移任务未满5000个。
  • 您名下处于“等待中”状态的迁移任务未满5000个。
  • 已在华为云注册账号,并完成实名认证。

操作步骤

  1. 登录华为云控制台
  2. 单击控制台左上角的,在下拉框中选择迁移目的端桶所在的Region,如图1所示。

    图1 选择目的端桶Region

  3. 单击控制台左侧“服务列表”,选择“迁移 > 对象存储迁移服务 OMS”,进入“对象存储迁移服务”页面。

    您也可以在搜索框中输入“OMS”,快速查找“对象存储迁移服务 OMS”,如图2所示。
    图2 选择对象存储迁移服务

  4. 在“迁移任务”页面,单击页面右上角的“创建迁移任务”,如图3所示。

    图3 创建迁移任务

  5. 仔细阅读弹出的隐私协议声明,勾选“同意以上隐私协议”,单击“确定”,进入“创建迁移任务”的“选择源端/目的端”页面,如图4所示。

    图4 选择源端/目的端页面

  6. 设置“选择源端”区域的参数,参见表1

    表1 设置源端参数

    参数

    设置

    数据源

    选择华为云。

    访问密钥

    填写源端华为云的访问密钥(AK)。

    私有访问密钥

    填写源端华为云的私有访问密钥(SK)。

    是否指定桶名

    关闭“是否指定桶名”(默认设置)。

    1. 单击“桶名”后的“连接源端桶”,在“桶名”中列举您名下的所有桶。
    2. 在“桶名”的下拉列表中选择需要迁移的桶。
    说明:

    当源端AK/SK没有列举桶权限时,需要开启“是否指定桶名”。

    开启“是否指定桶名”。

    1. 在“选择区域”下拉框中选择源端桶所在区域。
    2. 在“桶名与路径”文本框中输入源端桶名或带桶名的路径。
    3. 单击“连接源端桶”。

  7. 设置“选择目的端”区域的参数,参见表2

    表2 设置目的端参数

    参数

    设置

    访问密钥

    填写目的端华为云的访问密钥(AK)。

    私有访问密钥

    填写目的端华为云的私有访问密钥(SK)。

    填写访问密钥和私有访问密钥后,请单击“连接目的端桶”。

    桶名

    选择存放迁移数据的华为云OBS桶。

  8. 单击“下一步”,进入“设置任务参数”页面,如图5所示。

    图5 设置任务参数页面

  9. 根据下表迁移方式和适用场景说明,选择迁移方式。

    迁移方式

    适用场景

    说明

    选择文件/文件夹

    已知迁移对象文件名或者所在文件目录。

    • 选择文件夹:迁移勾选文件夹下的所有对象。
    • 选择文件:迁移勾选的对象文件。

    支持同时勾选文件夹和对象文件进行迁移,若不勾选,则默认迁移桶内的所有对象。

    指定对象列表

    已知所有需要迁移对象的文件名,并将所有文件名放置在一个.txt文件中,上传到华为云OBS桶。

    • 列表文件所在桶(华为云):必须与目的端桶处于同一区域,否则将无法选择对象列表文件。
    • 选择对象列表文件:选择包含所有对象文件名的.txt文件 。
    说明:
    • 对象列表文件大小不能超过100MB。
    • 对象列表文件必须是“.txt”类型的文件,并且该文件元数据中的“ContentType”只能为:“text/plain”。
    • 对象列表文件必须是UTF-8无BOM格式编码格式。
    • 对象列表文件中每行只能包含一个对象名称,并且对象名称使用URL Encode编码
    • 对象列表文件中每行不要添加无效空格,否则会将空格作为对象名,导致迁移失败。
    • 对象列表文件中每行长度不要超过65535,否则会导致迁移失败。
    • 对象列表文件的元数据中不能设置“ContentEncoding”,否则会导致迁移失败。
    • 对象列表文件如果是归档数据,迁移前需要先手动恢复,对象存储迁移服务才能访问和获取。

    输入对象前缀

    已知迁移对象的命名格式,且需要迁移对象用相同前缀命名。

    前缀添加成功后,会迁移桶中所有以该前缀开头的对象。

    若不添加该参数,则默认迁移桶内的所有对象。

  10. (可选)“选择文件/文件夹”迁移方式。

    1. 单击桶名下方的“选择”按钮,弹出“选择文件/文件夹”窗口。
    2. 勾选待迁移的文件夹,如图6所示;勾选待迁移的文件,如图7所示。

      支持同时勾选文件夹和对象文件进行迁移,若不勾选,则默认迁移桶内的所有对象。

      图6 选择文件夹
      图7 选择文件
    3. 单击“确定”,所选文件/文件夹显示在下方,如图8所示。
      图8 选择完成

  11. (可选)选择“指定对象列表”迁移方式。

    1. 在“列表文件所在桶(华为云)”下拉列表中,选择存放列表文件的桶,如图9所示。

      请确保列表文件所在桶与目的端桶处于同一区域,否则后续将无法选择对象列表文件。

      图9 选择列表文件所在桶
    2. 在“选择对象列表文件”参数后面,单击“选择”按钮,弹出“选择对象列表文件”窗口,选择包含所有对象文件名的.txt文件,单击“确定”,如图10所示。
      图10 选择对象列表文件

  12. (可选)选择“输入对象前缀”迁移方式。

    1. 在“桶名”下方的输入框中输入待迁移的对象数据名称或名称前缀,如图11所示。
      图11 输入对象数据名称或名称前缀
    2. 单击“添加”按钮,系统会自动匹配出数据,如图12所示。
      图12 匹配数据

      您可以单击,从匹配到的迁移数据列表中删除不需要迁移的数据。若不添加该参数,则默认迁移全桶的数据。

  13. (可选)单击“高级选项”后面“展开”,如图13所示。根据表3参数说明,设置“高级选项”参数。

    图13 高级选项
    表3 参数说明

    参数

    说明

    服务端加密

    可选,如果勾选“KMS”,对迁移数据进行KMS服务端加密后再存储至目的OBS桶中。

    记录失败对象

    默认“”。

    • 选择“”,不记录迁移失败的对象。如果迁移失败,只能全量重传。
    • 选择“”,记录迁移失败的对象。如果迁移失败,支持只对迁移失败对象进行重传。

    解冻归档数据

    默认“”。不建议开启,迁移数据中有归档数据时,优先选择使用OBS的解冻工具将数据解冻后再进行迁移。具体操作参见恢复归档存储对象

    • 选择“”,迁移数据中有归档数据时,则直接判定该对象迁移失败并跳过,继续迁移其余数据。
    • 选择“”,迁移数据中有归档数据时,会自动解冻归档类型数据并迁移。

    迁移指定时间后的对象

    使用时间过滤源端待迁移对象,默认“”。

    • 选择“”,不过滤源端待迁移对象。
    • 选择“”,仅迁移在指定时间之后修改的源端待迁移对象。

    发送通知

    默认“”,选择是否使用SMN消息通知功能,该功能可以通知您迁移任务的结果。

    • 选择“”,不接收SMN消息。
    • 选择“”,接收SMN消息。

    流量控制

    默认“”,设置迁移任务在指定时段的最大流量带宽。

    • 选择“”,不进行流量控制。
    • 选择“”,进行流量控制。

    描述

    输入本次迁移任务的简单描述信息。

  14. 单击“下一步”,进入“确认信息”页面,如图14所示。

    图14 确认信息页面

  15. 确认源端信息目的端信息任务参数高级选择等参数无误后,单击“开始迁移”。提示创建迁移任务成功。查看迁移任务列表已新增该任务。

    任务创建后,会生成一个任务ID供您快速识别。它显示在列表中任务的左上角,由源端桶名+目的端桶名+时间序列标识拼接而成。

相关操作

您可以对创建的迁移任务进行如下操作。

如果...

那么...

查看迁移任务

请参见查看迁移任务

管理迁移任务

请参见管理迁移任务

分享:

    相关文档

    相关产品