5不匹配的数据文件将迁移失败，MD5文件自身不被迁移。 若未配置“MD5文件名后缀”，则迁移所有文件。 写入时 该功能目前只支持目的端为OBS。可校验写入OBS的文件，是否与 CDM 抽取的文件一致。 该功能由目的端作业参数“校验MD5值”控制，读取文件后写入OBS时，通过HTTP

查看更多 →

流式写入Hudi表 HoodieDeltaStreamer流式写入 Hudi自带HoodieDeltaStreamer工具支持流式写入，也可以使用SparkStreaming以微批的方式写入。HoodieDeltaStreamer提供以下功能： 支持Kafka，DFS多种数据源接入

查看更多 →

写入和读写操作 关于写入和读写操作的命令： INSERT，可向表中插入一行或多行数据。 UPDATE，可修改表中现有数据。 DELETE，可删除表中现有数据。 COPY，导入数据。 INSERT和COPY是纯写入的操作。并发写入操作，需要等待，对同一个表的操作，当事务T1的INS

查看更多 →

本地Linux主机使用FTP上传文件到Linux云 服务器 操作场景 本文介绍如何在 Linux 系统的本地机器上使用 FTP 服务，将文件从本地上传到云服务器中。 前提条件 已在待上传文件的云服务器中搭建 FTP 服务。 云服务器已绑定弹性公网IP，且安全组入方向开启TCP协议的21端口。

查看更多 →

节点Node1根据数据的_id将数据路由到分片2，此时请求会被转发到Node3，并执行写操作。 当主分片写入成功后，它将请求转发到Node2的副本分片上。当副本写入成功后，Node3将向协调节点报告写入成功，协调节点向客户端报告写入成功。 Elasticsearch中的单个索引由一个或多个分片(shard)组

查看更多 →

写入和读写操作 关于写入和读写操作的命令： INSERT，可向表中插入一行或多行数据。 UPDATE，可修改表中现有数据。 DELETE，可删除表中现有数据。 COPY，导入数据。 INSERT和COPY是纯写入的操作。并发写入操作，需要等待，对同一个表的操作，当事务T1的INS

查看更多 →

批量写入Hudi表 引入Hudi包生成测试数据，参考使用Spark Shell创建Hudi表章节的2到4。 写入Hudi表，写入命令中加入参数：option("hoodie.datasource.write.operation", "bulk_insert")，指定写入方式为bulk_insert，如下所示：

查看更多 →

流式写入Hudi表 HoodieDeltaStreamer流式写入 Hudi自带HoodieDeltaStreamer工具支持流式写入，也可以使用SparkStreaming以微批的方式写入。HoodieDeltaStreamer提供以下功能： 支持Kafka，DFS多种数据源接入

查看更多 →

管理并发写入操作 事务隔离说明 写入和读写操作 并发写入事务的潜在死锁情况 并发写入示例 父主题： 导入数据

查看更多 →

本地Windows主机使用FTP上传文件到Windows/Linux 云服务器 操作场景 本节操作介绍如何在Windows操作系统的本地主机上使用FTP上传文件到云服务器。 前提条件 云服务器已绑定弹性公网IP，且安全组入方向开启TCP协议的21端口。 已在待上传文件的云服务器中搭建 FTP 服务。

查看更多 →

本地Windows主机使用FTP上传文件到Windows/Linux云服务器 操作场景 本节操作介绍如何在Windows操作系统的本地主机上使用FTP上传文件到云服务器。 前提条件 云服务器已绑定弹性公网IP，且安全组入方向开启TCP协议的21端口。 已在待上传文件的云服务器中搭建 FTP 服务。

查看更多 →

本地Windows主机使用FTP上传文件到Windows/Linux云服务器 操作场景 本节操作介绍如何在Windows操作系统的本地主机上使用FTP上传文件到云服务器。 前提条件 云服务器已绑定弹性公网IP，且安全组入方向开启TCP协议的21端口。 已在待上传文件的云服务器中搭建 FTP 服务。

查看更多 →

：禁用监控指标转储。 是 FTP IP地址 指定监控指标数据对接后存放监控文件的FTP服务器。 是 FTP端口 指定连接FTP服务器的端口。 是 FTP用户名 指定登录FTP服务器的用户名。 是 FTP密码 指定登录FTP服务器的密码。 是 保存路径 指定监控文件在FTP服务器保存的路径。 是

查看更多 →

地Linux主机使用FTP上传文件到Linux云服务器 云服务器自带FTP上传吗？ FTP需要用户自己安装和配置。 使用Windows自带的FTP服务搭建FTP站点请参考搭建FTP 站点（Windows）。 使用vsftpd软件搭建FTP站点请参考搭建FTP 站点（Linux）。

查看更多 →

FTP数据源测试连接失败 原因分析 服务器端和数据源的连接模式不一致，例如，服务器端连接模式配置为主动连接模式，而数据源配置为被动连接模式。 解决方案 修改连接模式，使服务器端和数据源的连接模式保持一致。 如果排除以上问题后，仍然连接失败，可参考数据源连接测试失败排查操作进行问题排查。

查看更多 →

地Linux主机使用FTP上传文件到Linux云服务器 云服务器自带FTP上传吗？ FTP需要用户自己安装和配置。 使用Windows自带的FTP服务搭建FTP站点请参考搭建FTP 站点（Windows）。 使用vsftpd软件搭建FTP站点请参考搭建FTP 站点（Linux）。

查看更多 →

地Linux主机使用FTP上传文件到Linux云服务器 云服务器自带FTP上传吗？ FTP需要用户自己安装和配置。 使用Windows自带的FTP服务搭建FTP站点请参考搭建FTP 站点（Windows）。 使用vsftpd软件搭建FTP站点请参考搭建FTP 站点（Linux）。

查看更多 →

21 FTP FTP服务开放的端口，用于上传和下载文件。配置示例请参见在本地服务器远程连接云服务器上传或者下载文件（FTP）。 22 SSH SSH端口，用于远程连接Linux 弹性云服务器 。配置示例请参见通过本地服务器远程登录云服务器。 登录方法请参见Linux弹性云服务器登录方式概述。

查看更多 →

数据源采集文件时，并发任务支持的总文件大小不超过800M。 说明： 仅适用于OBS、FTP、 MRS HDFS数据源。例如，并发执行2个OBS任务，2个FTP任务，则4个任务累加起来的文件大小不能超过800M。 FTP数据源类型 FTP数据源解析模式下支持的最大文件大小为200M，超过200M的文件将

查看更多 →

邮件服务器：当需要开启邮件通知的SSL安全协议时，需要导入SMTP服务器的CA证书，以供eBackup验证邮件服务器。请向SMTP服务器的管理员获取证书。 FTP服务器：当Manager与FTP服务器的通信协议为“FTPS”时，有效的证书能让Manager验证FTP服务器。请向FTP服务器的管理员获取证书。

查看更多 →

当选择校验MD5值时，可以选择是否记录校验结果。 是 校验结果写入连接 可以指定任意一个OBS连接，将MD5校验结果写入该连接的桶下。 obslink OBS桶 写入MD5校验结果的OBS桶。 cdm05 写入目录 写入MD5校验结果的目录。 /md5/ 编码类型 文件编码类型，例

查看更多 →