cdm
FTP/SFTP文件增量迁移到云上OBS服务
更新时间:2021/04/21 GMT+08:00
操作场景
CDM支持周期性自动将新增文件上传到OBS,不需要写代码,也不需要用户频繁手动上传即可使用OBS的海量存储能力进行文件备份。
这里以CDM周期性备份FTP的文件到OBS为例进行介绍。
例如:FTP服务器的“to_obs_test”目录下有一个子目录“another_dir”和两个文件“file1”和“file2”,其中“file2”在“another_dir”目录下,如图1所示。现在通过CDM的定时任务先将这些文件传输到OBS,然后在该目录下新增文件“file3”和“file4”,验证CDM会定期将新增文件再传输到OBS上。
前提条件
- 拥有EIP配额。
- 已创建OBS桶,且已获取访问密钥(AK和SK)。
- 已获取FTP服务器的IP地址、用户名和密码。
- 如果FTP服务器是在本地环境,需要确保FTP服务器可通过公网访问,或者已经建立好企业内部数据中心到云服务平台的VPN通道或专线。
创建CDM集群并绑定EIP
创建OBS连接
- 单击CDM集群后的“作业管理”,进入作业管理界面,再选择 ,进入选择连接器类型的界面,如图2所示。
- 选择“对象存储服务(OBS)”后,单击“下一步”配置OBS连接参数。
- 名称:用户自定义连接名称,例如“obslink”。
- OBS服务器、端口:配置为OBS实际的地址信息。
- 访问标识(AK)、密钥(SK):登录OBS的AK、SK。
图3 创建OBS连接 - 单击“保存”回到连接管理界面。
创建FTP连接
- 在连接管理界面,单击“新建连接”,连接器类型选择“FTP”,单击“下一步”配置FTP连接参数。
- 名称:用户自定义连接名称,例如“ftplink”。
- 主机名或IP、端口:配置为本地FTP服务器的地址。
- 用户名、密码:配置为登录FTP服务器的用户名和密码。
- 单击“保存”回到连接管理界面。
创建定时迁移作业
- 选择 ,创建数据迁移任务。图4 创建FTP到OBS的迁移任务
- 单击“下一步”配置定时任务,这里配置为每10分钟执行一次,其他参数保持默认即可。图5 配置定时任务
- 选择“保存并运行”。
验证周期备份结果
父主题: 文件迁移
