其他优化器选项
查询计划的生成质量直接影响SQL的执行性能,统计信息采样、规划约束、并行度和节点间通信方式等设置都会影响查询计划的选择。本节介绍除优化器方法配置以外的其他优化器选项参数,包括统计信息采样目标(default_statistics_target)、规划折叠限制(from_collapse_limit、join_collapse_limit)、SMP与actor并行度(query_dop、fq_query_vdn等)以及节点间通信方式(enable_libcomm)等。您可以根据数据规模和业务负载调整这些参数,提升查询计划的准确性和执行效率。
参数说明
| 参数 | 参数类型 | 说明 |
|---|---|---|
| default_statistics_target | Float | 参数解释:为没有用ALTER TABLE SET STATISTICS设置字段目标的表设置缺省统计目标。此参数设置为正数是代表统计信息的样本数量,为负数时,代表使用百分比的形式设置统计目标,负数转换为对应的百分比,即-5代表5%。采样时,会将default_statistics_target * 300作为随机抽样的大小,例如默认值为100时,会随机读取30000个页面再从中随机取30000条数据来完成随机抽样。 取值范围:浮点型,-100~10000。 说明:
默认值:100。 |
| from_collapse_limit | Integer | 参数解释:根据生成的FROM列表的项数来判断优化器是否将把子查询合并到上层查询,如果FROM列表项个数小于等于该参数值,优化器会将子查询合并到上层查询。 取值范围:整型,[1,INT_MAX]。 说明: 比默认值小的数值将降低规划时间,但是可能生成差的执行计划。 默认值:8。 |
| join_collapse_limit | Integer | 参数解释:根据得出的列表项数来判断优化器是否执行把除FULL JOINS之外的JOIN构造重写到FROM列表中。 取值范围:整型,[1,INT_MAX]。 说明:
默认值:8。 |
| enable_libcomm | Boolean | 参数解释:标识DN之间是否通过libcomm通讯。 取值范围:布尔型。
默认值:off。 |
| enable_bloom_filter | Boolean | 参数解释:标识是否允许使用BloomFilter优化。 适用于外表侧同线程包含有HDFS内外表或列存表的HASH JOIN会触发Bloom Filter场景。 使用限制:
取值范围:布尔型。
默认值:无。 |
| enable_extrapolation_stats | Boolean | 参数解释:标识是否允许基于历史统计信息使用推理估算的逻辑。使用该逻辑对于未及时收集统计信息的表可以增大估算准确的可能性,但也存在错误推理导致估算过大的可能性。 取值范围:布尔型。
默认值:off。 |
| query_dop | Integer | 参数解释:用户自定义的查询并行度。 取值范围:整型,[-64,64]。
默认值:1。 |
| smp_thread_cost | Float | 参数解释:在SMP自适应场景下,规划线程并行度时,考虑每个SMP线程应承载的最小估算代价。当算子估算代价较小而并行度较大,使每个SMP线程计算的估算代价小于该阈值时,优化器会自动降低算子的并行度,以避免为低代价算子开启较高并行度浪费系统资源。 取值范围:浮点型,[0,10000]。
说明: 当该参数不为0时,算子的估算代价过小会导致SMP并行度较低。当发现对应情况时,可将该参数设置为0,增大计算并行度。 默认值:1000。 |
| plan_mode_seed | Integer | 参数解释:该参数为调测参数,用于控制优化器通过动态规划算法进行代价估算的最优执行计划,或生成随机的计划。参数类型:USERSET。 取值范围:整型,[-1,2147483647]。
说明:
默认值:0。 |
| fq_query_vdn | Integer | 参数解释:控制任务拉起的actor个数。 取值范围:整型,[0, 256]。
默认值:2。 |
| fq_actor_adapt_type | Enum | 参数解释:控制拉起actor自适应的方式。 取值范围:枚举类型。
说明: 该参数仅在actor个数自适应的场景下生效,即fq_query_vdn=0。 默认值:mem。 |
| fq_dynamic_actor_cost_threshold | Float | 参数解释:fq_query_vdn=0时,单cn代价的阈值。超过该阈值时拉起actor。 取值范围:浮点型,[1, 1e10]。 默认值:200000。 说明: 自适应时,选取的actor个数和代价之间不是简单的线性关系,而是梯度不断下降的过程,随着代价的增大,最终会趋向于256。 |
| objref_transfer_options | String | 参数解释:用来配置大数据流转相关设置,参数格式为逗号分隔的键值对,每个键值对以(key:value)形式表示。该参数生效的前提是sql_opt_options设置了objectref_transfer。 取值范围:键值对字符串。
默认值:(release_batch_threshold:16),(width_threshold:0)。 示例: set objref_transfer_options = "(release_batch_threshold:16),(width_threshold:0)"; |