指定文件名迁移 从FTP/SFTP/OBS导出文件时， CDM 支持指定文件名迁移，用户可以单次迁移多个指定的文件（最多50个），导出的多个文件只能写到目的端的同一个目录。 在创建表/文件迁移作业时，如果源端数据源为FTP/SFTP/OBS，CDM源端的作业参数“源目录或文件”支持输

查看更多 →

指定文件名迁移 从FTP/SFTP/OBS导出文件时，CDM支持指定文件名迁移，用户可以单次迁移多个指定的文件（最多50个），导出的多个文件只能写到目的端的同一个目录。 在创建表/文件迁移作业时，如果源端数据源为FTP/SFTP/OBS，CDM源端的作业参数“源目录或文件”支持输

查看更多 →

from below, or type in your own value 24 / SSH/SFTP Connection \ "sftp" Storage> 24 (选择ssh/sftp号码) SSH host to connect to Enter a string value

查看更多 →

DNS：Linux DNS的基本配置。 需要您自行设置、排查与优化： WEB服务：优化配置、编写伪静态规则、插件调试等。 数据库：数据库调优、SQL语句优化等。 防火墙：基于iptables构建自动化检测防御工具等。 网络服务：SSH传输文件速度优化、SFTP如何限速等。 OpenVPN：多个OpenVPN互联等。

查看更多 →

数据导出 概述 使用Loader导出数据 典型场景：从HDFS/OBS导出数据到SFTP 服务器 典型场景：从HBase导出数据到SFTP服务器 典型场景：从Hive导出数据到SFTP服务器 典型场景：从HDFS/OBS导出数据到关系型数据库 典型场景：从HBase导出数据到关系型数据库

查看更多 →

准备一个用于备份数据的备集群，认证模式需要与主集群相同。 如果主集群部署为安全模式，且主备集群不是由同一个 FusionInsight Manager管理，则必须配置系统互信，请参见配置 MRS 集群间互信。如果主集群部署为普通模式，则不需要配置互信。 主备集群必须已配置跨集群拷贝，请参见启用MRS集群间拷贝功能。

查看更多 →

配置作业源端参数 配置MySql源端参数 配置Hive源端参数 配置HDFS源端参数 配置Hudi源端参数 配置PostgreSQL源端参数 配置SQLServer源端参数 配置Oracle源端参数 配置 DLI 源端参数 配置OBS源端参数 配置SAP HANA源端参数 配置Kafka源端参数

查看更多 →

from below, or type in your own value 24 / SSH/SFTP Connection \ "sftp" Storage> 24 (选择ssh/sftp号码) SSH host to connect to Enter a string value

查看更多 →

sftphost 是 String SFTP网管IP。 sftpport 是 String SFTP端口。 sftpuser 是 String SFTP用户名。 sftppassword 是 String SFTP密码。 sftppath 是 String SFTP采集路径。 sftpScanPeriod

查看更多 →

创建Loader数据导入作业 使用Loader导入数据至MRS集群 使用Loader从SFTP服务器导入数据到HDFS/OBS 使用Loader从SFTP服务器导入数据到HBase 使用Loader从SFTP服务器导入数据到Hive 使用Loader从FTP服务器导入数据到HBase 使

查看更多 →

完成了Loader客户端的安装与配置，具体操作请参见使用客户端运行Loader作业。 操作步骤 在SFTP服务器的“/opt/houjt/test03”路径中，创建多个以“table1”为前缀，“.txt”为后缀，中间为yyyyMMdd的日期格式的文件。 图1 示例 创建一个从SFTP服务器导入

查看更多 →

配置CDM作业源端参数 配置OBS源端参数 配置HDFS源端参数 配置HBase/CloudTable源端参数 配置Hive源端参数 配置DLI源端参数 配置FTP/SFTP源端参数 配置HTTP源端参数 配置PostgreSQL/SQL Server源端参数 配置DWS源端参数

查看更多 →

from below, or type in your own value 24 / SSH/SFTP Connection \ "sftp" Storage> 24 (选择ssh/sftp号码) SSH host to connect to Enter a string value

查看更多 →

from below, or type in your own value 24 / SSH/SFTP Connection \ "sftp" Storage> 24 (选择ssh/sftp号码) SSH host to connect to Enter a string value

查看更多 →

准备一个用于备份数据的备集群，认证模式需要与主集群相同。 如果主集群部署为安全模式，且主备集群不是由同一个FusionInsight Manager管理，则必须配置系统互信，请参见配置MRS集群间互信。如果主集群部署为普通模式，则不需要配置互信。 主备集群必须已配置跨集群拷贝，请参见启用MRS集群间拷贝功能。

查看更多 →

数据恢复后，依赖DBService的组件可能配置过期，需要重启配置过期的服务。 前提条件 如果需要从远端HDFS恢复数据，需要准备备集群，且已完成数据备份，详细操作请参见备份DBService元数据。如果主集群部署为安全模式，且主备集群不是由同一个FusionInsight Manager管理，则必须配置系统互信，

查看更多 →

完成了Loader客户端的安装与配置，具体操作请参见使用命令行运行Loader作业。 操作步骤 在SFTP服务器的“/opt/houjt/test03”路径中，创建多个以“table1”为前缀，“.txt”为后缀，中间为yyyyMMdd的日期格式的文件。 图1 示例 创建一个从SFTP服务器导入

查看更多 →

说明： ftp或sftp作为源连接时，当“文件格式”配置为BINARY_FILE时，高级属性中的“换行符”配置无效。 字段分割符 源数据的每个字段分割标识字符。 说明： ftp或sftp作为源连接时，当“文件格式”配置为BINARY_FILE时，高级属性中的“字段分割符”配置无效 编码类型

查看更多 →

数据导入 概述 使用Loader导入数据 典型场景：从SFTP服务器导入数据到HDFS/OBS 典型场景：从SFTP服务器导入数据到HBase 典型场景：从SFTP服务器导入数据到Hive 典型场景：从FTP服务器导入数据到HBase 典型场景：从关系型数据库导入数据到HDFS/OBS

查看更多 →

root 4096 Mar 14 17:18 utils 修改配置文件“Collector.cfg”。 如果使用的是官网下载的软件安装包，需要修改配置项，配置项修改说明如表1所示。 表1 配置项修改说明 配置项 参数说明 填写说明 示例 collector.customer.name

查看更多 →

使用Loader导出MRS集群内数据 使用Loader从HDFS/OBS导出数据到SFTP服务器 使用Loader从HBase导出数据到SFTP服务器 使用Loader从Hive导出数据到SFTP服务器 使用Loader从HDFS/OBS导出数据到关系型数据库 使用Loader从HDFS导出数据到MOTService

查看更多 →