# 搬迁本地数据至OBS
#### 背景
传统的自建存储服务器已不能满足大量的数据存储需求，主要原因可以归类为以下三点：
- 数据存储量受限于搭建服务器时使用的硬件设备，如果存储量不够，需要重新购买存储硬盘，进行人工扩容。
- 前期安装难、设备成本高、初始投资大、自建周期长、无法匹配快速变更的企业业务。
- 需承担网络信息安全、技术漏洞、误操作等各方面的数据安全风险。
OBS提供海量、稳定、安全的云存储能力，无需事先规划存储容量，存储资源可线性无限扩展，用户永远不必担心存储容量不够用。在OBS上可以存储任何类型和大小的非结构化数据，多级可靠性架构以及服务端加密、日志管理、权限控制等功能，保障存储在OBS上的数据高度稳定和安全。在成本方面，OBS即开即用，免去了自建存储服务器带来的资金、时间及人力成本的投入，后期的设备维护也全部交由OBS处理。
华为云提供[搬迁方案]，帮助用户将自建存储服务器上的数据短时间、低成本、安全、高效地搬迁至OBS。用户可根据数据量、耗时、费用等需求选择适合的方案进行数据搬迁。
 #### 搬迁方案
针对不同的搬迁场景及需求，华为云提供如[表1]所示的几种搬迁方案。
 表1搬迁方案 
| 搬迁方式                                                     | 适用数据量                  | 要求                            | 耗时                                                                                       | 费用                                                                                          |
|:---|:---|:---|:---|:---|
| [OBS工具方式]（在线）         | 不高于1TB的数据量             | 要求用户公网带宽空闲，需要人工操作客户端或脚本启动数据上传 | 家用100Mbps带宽，1TB耗时1天左右                                                                    | 数据传输不收取费用，仅OBS收取基本的存储费用                                                                     |
| [CDM方式]（在线）          | 单次小于8TB的数据量            | 需要用户单独购买CDM服务                 | 1TB\~8TB/天（取决于网络和数据读取源的读写性能）                                                             | 根据购买CDM实例规格以及使用时长收费，具体参见[CDM价格详情](https://www.huaweicloud.com/pricing.html?tab=detail#/cdm) |
| [DES磁盘方式]（离线）       | 单次小于30TB的数据量           | 需要用户自己提供磁盘                    | 请参见[从创建DES服务单到数据导入华为云需要多长时间？](https://support.huaweicloud.com/des_faq/des_faq_0076.html) | 根据磁盘数量以及使用时长收费，具体参见[DES价格详情](https://www.huaweicloud.com/pricing.html?tab=detail#/des)      |
| [DES Teleport方式]（离线） | 单次30TB\~500TB的数据量      | 由华为数据中心邮寄Teleport给用户使用        | 请参见[从创建DES服务单到数据导入华为云需要多长时间？](https://support.huaweicloud.com/des_faq/des_faq_0076.html) | 根据数据大小以及使用时长收费，具体参见[DES价格详情](https://www.huaweicloud.com/pricing.html?tab=detail#/des)      |
| [云专线方式]（实时）          | 每月大于100TB的数据量，需要实时在线上传 | 需要部署专线                        | 根据专线带宽决定                                                                                 | 根据专线距离以及带宽收费，具体参见[云专线价格详情](https://www.huaweicloud.com/pricing.html?tab=detail#/dline)      |
   
 #### OBS工具方式
OBS工具方式适用于百GB规模的数据搬迁。OBS提供OBS Browser+、obsutil等多种客户端工具，方便用户在本地直接将数据上传至OBS。由于上传需要占用用户公网带宽，为不影响用户在公网上的主营业务，建议利用公网带宽空闲的时间上传数据。
各工具使用场景及操作指导，请参见[OBS工具指南](https://support.huaweicloud.com/tg-obs/obs_09_0001.html)。
 #### CDM方式
云数据迁移（Cloud Data Migration，CDM）提供同构/异构数据源之间批量数据迁移服务。CDM通过创建定时作业，将用户自建存储服务器上的文件系统、数据库、对象存储等数据源与华为云OBS进行连接，从而实现定时、自动地将本地数据搬迁至OBS。
图1CDM方式搬迁数据示意图   
![](https://support.huaweicloud.com/bestpractice-obs/zh-cn_image_0000001970523085.png "点击放大")
1. 创建OBS桶 通过OBS控制台或OBS Browser+创建桶，用于存放原始数据。
   
2. 购买CDM 购买CDM服务，即创建CDM集群，用于管理连接与作业。
   
3. 配置连接与作业 在创建CDM集群中创建一个源连接和一个目的连接，分别与用户本地数据源和云端OBS连接。然后再创建CDM作业，执行从本地数据搬迁到云端OBS的任务。
   
4. 启动数据传输 运行CDM作业，启动数据传输。用户可以通过作业管理界面查看作业进度。
   
#### CDM方式示例：金融大数据咨询业务数据迁移
使用CDM将本地贸易统计数据导入到OBS，再使用数据湖探索（Data Lake Insight，DLI）进行贸易统计分析，帮助H咨询公司以极简、极低成本构建其大数据分析平台，使得该公司更好地聚焦业务，持续创新。
详细操作请参见[金融大数据咨询业务数据迁移](https://support.huaweicloud.com/bestpractice-cdm/cdm_05_0001.html#)。
 #### DES磁盘方式
DES磁盘方式同样采用离线的方式将用户数据磁盘（USB、eSATA接口的磁盘等）快递至华为云，实现数据高效传输。磁盘方式适用于30TB以下的数据量搬迁。
图2DES磁盘方式搬迁数据示意图   
![](https://support.huaweicloud.com/bestpractice-obs/zh-cn_image_0000001943124864.png "点击放大")
1. 创建OBS桶 通过OBS控制台或OBS Browser+创建桶，用于存放原始数据。
   
2. 创建DES磁盘方式服务单 登录DES控制台，创建一个磁盘方式的服务单。然后将DES提供的签名文件导入本地数据磁盘并邮寄给华为云数据中心。
   
3. 启动数据传输 华为云数据中心收到用户的磁盘并将磁盘挂载到物理服务器后，会短信通知用户填写访问密钥（AK和SK）来启动数据上传。数据传输完成后，用户可以通过DES控制台和OBS控制台两种途径查看传输结果。同时华为云数据中心也会将用户磁盘回寄给用户。
   
具体操作步骤请参见[磁盘方式详细指导](https://support.huaweicloud.com/usermanual-des/zh-cn_topic_0047663833.html)。
 #### DES Teleport方式
Teleport是数据快递服务（Data Express Service，DES）专为30TB\~500TB范围内数据搬迁至OBS而定制的存储设备，具有防尘防水、抗震抗压以及GPS锁定、传输加密等多重安全防护机制，配合离线传输的方式，能安全、高效的完成大规模数据搬迁。
图3DES Teleport方式搬迁数据示意图   
![](https://support.huaweicloud.com/bestpractice-obs/zh-cn_image_0000001970403353.png "点击放大")
1. 创建OBS桶 通过OBS控制台或OBS Browser+创建桶，用于存放原始数据。
   
2. 创建DES Teleport服务单 DES提供Teleport和磁盘两种数据快递方式，在当前场景下选择Teleport方式。
   
3. 接收并导入数据至Teleport 成功创建DES服务单后，用户将接收到由华为数据中心邮寄的Teleport设备。接着进行简单配置操作使Teleport与用户客户端连接起来，然后执行数据拷贝并将设备回寄给华为云数据中心。
   
4. 启动数据传输 在华为云数据中心收到回寄的Teleport后，用户可以在DES控制台上输入访问密钥启动数据从Teleport到OBS指定桶的传输。数据传输完成后，用户可以通过DES控制台和OBS控制台两种途径查看传输结果。
   
具体操作步骤请参见[Teleport方式详细指导](https://support.huaweicloud.com/usermanual-des/des_01_0011.html)。
 #### 云专线方式
云专线方式由用户自己购买云专线服务（Direct Connect，DC），直接将用户本地的网络与华为云网络打通，实现专线直接访问OBS等服务。云专线方式适用于需要频繁或实时地将本地数据搬迁至OBS的场景。专线提供的低时延、高带宽，可以满足用户随时上传数据至OBS的需求，更多云专线访问OBS的相关内容请参考[使用云专线访问OBS](https://support.huaweicloud.com/bestpractice-obs/obs_05_2202.html)。
图4云专线方式搬迁数据示意图   
![](https://support.huaweicloud.com/bestpractice-obs/zh-cn_image_0000001943284208.png "点击放大")
1. 创建OBS桶 登录OBS控制台，创建一个或多个用于存储用户数据的桶。
   
2. 开通云专线服务 登录云专线控制台，根据业务需求填写专线申请并提交订单，待管理员审核通过后，用户支付订单，联系运营商安排工程师接通两端物理线路，华为工程师配合进行连接配置。具体操作步骤请参见[开通云专线](https://support.huaweicloud.com/qs-dc/zh-cn_topic_0145790541.html)。
   
3. 配置VPC终端节点 在VPC终端节点中创建DNS终端节点和OBS终端节点，在本地数据中心配置DNS转发规则、DNS路由以及OBS路由。具体操作参见[配置通过内网访问OBS服务的终端节点](https://support.huaweicloud.com/qs-vpcep/vpcep_02_0300.html)。
   ![](https://support.huaweicloud.com/bestpractice-obs/public_sys-resources/note_3.0-zh-cn.png)
   - "拉美-墨西哥城一"、"拉美-圣保罗一"和"拉美-圣地亚哥"区域支持服务类别选择"云服务"购买连接OBS的终端节点，详情参见[购买连接OBS的终端节点](https://support.huaweicloud.com/qs-vpcep/vpcep_02_0300.html#section4)。拉美-墨西哥城一选择com.myhuaweicloud.na-mexico-1.obs；拉美-圣保罗一选择com.myhuaweicloud.sa-brazil-1.obs，"拉美-圣地亚哥"选择com.myhuaweicloud.la-south-2.obs。
   
   - 其他区域支持服务类别选择"按名称查找服务"购买连接OBS的终端节点，请[提交工单](https://console.huaweicloud.com/ticket/#/ticketindex/createIndex)寻求技术支持获取终端节点服务名称。
     
4. 启动数据传输 专线搭建成功并完成VPC终端节点配置后，用户便可以通过控制台、工具、API、SDK等多种方式将本地数据上传至OBS。
   
 
#### 迁移专业服务
华为云专业迁移团队提供对象存储数据上云规划设计、上云实施、云上优化全方位服务，帮助您安全、可靠、高效上云。
详情请参见[数据上云设计与实施服务](https://www.huaweicloud.com/service/ddi.html)。