更新时间:2026-08-13 GMT+08:00

配置MRS Iceberg目的端参数

表1 Iceberg作为目的端时的作业参数

类别

配置项

配置说明

推荐配置

基本参数

数据库名称

输入或选择写入数据的数据库名称。单击输入框后面的按钮可进入数据库选择界面。

default

表名

单击输入框后面的按钮可进入表的选择界面。

test_iceberg

写入模式

数据写入模式。

  • TRUNCATE+LOAD:TRUNCATE方式会在导入前执行TRUNCATE语句清空填写的分区数据,再进行LOAD写入数据。
  • LOAD:写入前不做任何处理。
  • INSERT_OVERWRITE:对数据进行覆盖写入。

LOAD

运行队列

指定请求参数--queue的值,决定spark任务提交到哪个队列运行。

default

高级属性

前置参数

在执行Spark SQL往Iceberg插入数据前,通过SET语法设置参数,从而控制Spark的写入行为。

--driver-memory=2G,--executor-memory=2G,--driver-cores=1,--executor-cores=1,--num-executors=2