
# 配置HDFS目的端参数
表1HDFS作为目的端时的作业参数 
| 参数类型 | 参数名      | 说明                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   | 取值样例                                                             |
|:---|:---|:---|:---|
| 基本参数 | 写入目录     | 写入数据到HDFS服务器的目录。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     | /user/cdm/output                                                 |
| 基本参数 | 文件格式     | 传输数据时使用的格式。其中CSV和JSON仅支持迁移到数据表场景，二进制格式适用于文件迁移场景。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     | CSV格式                                                            |
| 基本参数 | 换行符处理方式  | 指定在写入文本文件表的数据包含换行符，特指(\\n\|\\r\|\\r\\n)的情况下处理换行符的策略。 - 删除  - 不处理  - 替换为其他字符串                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                         | 删除                                                               |
| 基本参数 | 换行符替换字符串 | 当换行符处理方式选择为替换时，指定替换的字符串。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                             | -                                                                |
| 高级属性 | 写入到临时文件  | 文件格式为二进制格式时显示该参数。 将二进制文件先写入到临时文件。临时文件以".tmp"作为后缀。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                            | 否                                                                |
| 高级属性 | 换行符      | 文件格式为CSV格式时显示该参数。 文件中的换行符，默认自动识别"\\n"、"\\r"或"\\r\\n"。手动配置特殊字符，如空格回车需使用URL编码后的值。或通过编辑作业json方式配置，无需URL编码。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    | \\n                                                              |
| 高级属性 | 字段分隔符    | 文件格式为CSV格式时显示该参数。 文件中的字段分隔符。配置特殊字符需先url编码。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   | ,                                                                |
| 高级属性 | 作业成功标识文件 | 标识文件名。 当作业成功时，在写入目录下生成标识文件。不输入文件名时不启用该功能。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     | finish.txt                                                       |
| 高级属性 | 使用包围符    | 文件格式为CSV格式时显示该参数。 使用包围符来括住字符串值。包围符内的字段分隔符被视为字符串值的一部分，目前只支持"作为包围符。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           | 否                                                                |
| 高级属性 | 自定义目录层次  | 支持用户自定义文件的目录层次。 例如：【表名】/【年】/【月】/【日】/【数据文件名】. csv                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           | 否                                                                |
| 高级属性 | 目录层次     | 自定义目录层次选择是时显示该参数。 指定文件的目录层次，支持时间宏（时间格式为yyyy/MM/dd）。源端为关系型数据库数据源时，目录层次为源端表名+自定义目录，其他场景下为自定义目录。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                               | ${dateformat(yyyy/MM/dd, -1, DAY)}                               |
| 高级属性 | 文件名前缀    | "文件格式"选择"CSV格式"时，该参数才显示。 自定义写入文件的文件名前缀，用户仅需输入前缀值，其余三段由系统自动填充。 最终生成的文件名格式为：前缀-作业名-时间戳-序号，其中： - 前缀：用户输入的值；  - 作业名：系统自动填充当前作业名称；  - 时间戳：系统自动填充，格式为yyyy-MM-dd_HH.mm.ss.SSS；  - 序号：系统自动填充，为MapReduce任务的attempt编号，用于区分并行写入的不同文件。   如输入前缀data，作业名为myjob，最终生成文件名为：data-myjob-2026-06-18_14.30.25.123-000000.csv。 支持时间宏变量，例如：data_${dateformat(yyyyMMdd, -1, DAY)}。 说明： - 仅当作业源端为关系数据库及DLI时配置该参数。  - 文件名格式要符合HDFS文件路径命名规范，即文件格式避免使用 /, :, \~ 等特殊字符。   | data                                                             |
| 高级属性 | 压缩格式     | 文件格式为CSV格式时显示该参数。 选择写入文件的压缩格式。 - NONE  - DEFLATE  - GZIP  - BZIP2  - SNAPPY                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                          | SNAPPY                                                           |
| 高级属性 | 加密方式     | 文件格式为二进制格式时显示该参数。 对上传的数据进行加密。 - 无  - AES-256-GCM                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                    | 无                                                                |
| 高级属性 | 数据加密密钥   | 文件格式为二进制格式且选择加密方式时显示该参数。 数据加密密钥（Data Encryption Key），AES-256-GCM密钥由长度64的十六进制数组成。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                           | DD0AE00DFECD78BF051BCFDA25BD4E320DB0A7AC75A1F3FC3D3C56A457DCDC1B |
| 高级属性 | 初始化向量    | 文件格式为二进制格式且选择加密方式时显示该参数。 设置初始化向量，由长度32的十六进制数组成。                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                             | 5C91687BA886EDCD12ACBC3FF19A3C3F                                 |
   
