enable_codegen 参数说明：标识是否允许开启代码生成优化，目前代码生成使用的是LLVM优化。 参数类型：USERSET 取值范围：布尔型 on表示允许开启代码生成优化。 off表示不允许开启代码生成优化。 目前LLVM优化仅支持向量化执行引擎特性和SQL on Hadoop特性，在其他场景下建议关闭此参数。

查看更多 →

cpu_tuple_cost 参数说明：设置优化器计算在一次查询中处理每一行数据的开销。 参数类型：USERSET 取值范围：浮点型，0～10000。 默认值：0.01 cpu_index_tuple_cost 参数说明：设置优化器计算在一次索引扫描中处理每条索引的开销。 参数类型：USERSET

查看更多 →

Hive Group By语句优化 操作场景 优化Group by语句，可提升命令执行速度和查询速度。 Group by的时候， Map端会先进行分组， 分组完后分发到Reduce端， Reduce端再进行分组。可采用Map端聚合的方式来进行Group by优化，开启Map端初步聚合，减少Map的输出数据量。

查看更多 →

Hive SQL逻辑优化 操作场景 在Hive上执行SQL语句查询时，如果语句中存在“(a&b) or (a&c)”逻辑时，建议将逻辑改为“a & (b or c)”。 样例 假设条件a为“p_partkey = l_partkey”，优化前样例如下所示： select

查看更多 →

Datasource表优化 操作场景 将datasource表的分区消息存储到Metastore中，并在Metastore中对分区消息进行处理。 优化datasource表，支持对表中分区执行增加、删除和修改等语法，从而增加与Hive的兼容性。 支持在查询语句中，把分区裁剪并下压

查看更多 →

Kafka性能优化 Kafka性能优化 优化客户端配置 生产者配置建议 可参考配置建议。 消费者配置建议 参数 推荐值 说明 max.poll.records 500 消费者一次能消费到的最大消息数量，默认为500，如果每条消息处理时间较长，建议调小该值，确保在max.poll.interval

查看更多 →

。Spark提供一站式数据分析能力，包括小批量流式处理、离线批处理、SQL查询、数据挖掘等，用户可以在同一个应用中无缝结合使用这些能力。 Spark的特点如下： 通过分布式内存计算和DAG（无回路有向图）执行引擎提升数据处理能力，比MapReduce性能高10倍到100倍。 提供

查看更多 →

SQL中进行Join操作时，可以按照以下步骤进行优化。为了方便说明，设表A和表B，且A、B表都有个名为name的列。对A、B表进行join操作。 估计表的大小。 根据每次加载数据的大小，来估计表大小。 也可以在Hive的数据库存储路径下直接查看表的大小。首先在Spark的配置文件“hive-site.x

查看更多 →

优化器开销常量 介绍优化器开销常量。这里描述的开销可以按照任意标准度量。只关心其相对值，因此以相同的系数缩放它们将不会对优化器的选择产生任何影响。缺省时，以抓取顺序页的开销为基本单位。也就是说将seq_page_cost设为1.0，同时其他开销参数以他为基准设置。也可以使用其他基准，比如以毫秒计的实际执行时间。

查看更多 →

Join算子进行下盘文件数优化。该参数打开时，在Hash Join算子下盘文件较多的时候，下盘文件数不会显著增加。 该参数属于USERSET类型参数，请参考表1中对应设置方法进行设置。 取值范围：布尔型 on表示优化面向列的hash表设计的Hash Join算子的下盘文件数。 off表

查看更多 →

Execute）形式执行的语句进行查询计划的优化。 该参数属于SUSET类型参数，请参考表1中对应设置方法进行设置。 取值范围：布尔型。 on表示优化器将优化PBE语句的查询计划。 off表示不使用优化。 默认值：on enable_light_proxy 参数说明：设置优化器是否对简单查询在CN上优化执行，应用

查看更多 →

参数说明：设置优化器计算在一次查询中处理每一行数据的开销。 该参数属于USERSET类型参数，请参考表1中对应设置方法进行设置。 取值范围：浮点型，0～DBL_MAX。 默认值：0.01 cpu_index_tuple_cost 参数说明：设置优化器计算在一次索引扫描中处理每条索引的开销。

查看更多 →

基因查询优化器 介绍基因查询优化器相关的参数。基因查询优化器（GEQO）是一种启发式的查询规划算法。这个算法减少了对复杂查询规划的时间，而且生成规划的开销有时也小于正常的详尽的查询算法。 geqo 参数说明：控制基因查询优化的使用。 该参数属于USERSET类型参数，请参考表1中对应设置方法进行设置。

查看更多 →

Join算子进行下盘文件数优化。该参数打开时，在Hash Join算子下盘文件较多的时候，下盘文件数不会显著增加。 该参数属于USERSET类型参数，请参见表1中对应设置方法进行设置。 取值范围：布尔型 on表示优化面向列的hash表设计的Hash Join算子的下盘文件数。 off表

查看更多 →

参数说明：设置优化器计算在一次查询中处理每一行数据的开销。 该参数属于USERSET类型参数，请参考表1中对应设置方法进行设置。 取值范围：浮点型，0～DBL_MAX。 默认值：0.01 cpu_index_tuple_cost 参数说明：设置优化器计算在一次索引扫描中处理每条索引的开销。

查看更多 →

基因查询优化器 介绍基因查询优化器相关的参数。基因查询优化器（GEQO）是一种启发式的查询规划算法。这个算法减少了对复杂查询规划的时间，而且生成规划的开销有时也小于正常的详尽的查询算法。 geqo 参数说明：控制基因查询优化的使用。 该参数属于USERSET类型参数，请参考表1中对应设置方法进行设置。

查看更多 →

cpu_tuple_cost 参数说明：设置优化器计算在一次查询中处理每一行数据的开销。 参数类型：USERSET 取值范围：浮点型，0～DBL_MAX。 默认值：0.01 cpu_index_tuple_cost 参数说明：设置优化器计算在一次索引扫描中处理每条索引的开销。 参数类型：USERSET

查看更多 →

enable_codegen 参数说明：标识是否允许开启代码生成优化，目前代码生成使用的是LLVM优化。 参数类型：USERSET 取值范围：布尔型 on表示允许开启代码生成优化。 off表示不允许开启代码生成优化。 目前LLVM优化仅支持向量化执行引擎特性和SQL on Hadoop特性，在其他场景下建议关闭此参数。

查看更多 →

优化器方法配置 这些配置参数提供了影响查询优化器选择查询规划的原始方法。如果优化器为特定的查询选择的缺省规划并不是最优的，可以通过使用这些配置参数强制优化器选择一个不同的规划来临时解决这个问题。更好的方法包括调节优化器开销常量、手动运行ANALYZE、增加配置参数default_

查看更多 →

cpu_tuple_cost 参数说明：设置优化器计算在一次查询中处理每一行数据的开销。 参数类型：USERSET 取值范围：浮点型，0～10000。 默认值：0.01 cpu_index_tuple_cost 参数说明：设置优化器计算在一次索引扫描中处理每条索引的开销。 参数类型：USERSET

查看更多 →

基因查询优化器 介绍基因查询优化器相关的参数。基因查询优化器（GEQO）是一种启发式的查询规划算法。这个算法减少了对复杂查询规划的时间，而且生成规划的开销有时也小于正常的详尽的查询算法。 geqo 参数说明：控制基因查询优化的使用。 参数类型：USERSET 取值范围：布尔型 on表示使用。

查看更多 →