Array of AttrPairRules objects 属性对保留。 deduplication_list 否 Array of Deduplication objects 属性去重。 attribute_info 否 AttributeInfo object 综合排序信息。 bloom_filter_conf

查看更多 →

Array of AttrPairRules objects 属性对保留。 deduplication_list 否 Array of Deduplication objects 属性去重。 attribute_info 否 AttributeInfo object 综合排序信息。 bloom_filter_conf

查看更多 →

huawei.bigdata.spark.examples.SparkHivetoHbase /** * 从hive表读取数据，根据key值去hbase表获取相应记录，把两者数据做操作后，更新到hbase表 */ public class SparkHivetoHbase {

查看更多 →

参数说明：指定SQL语句出错自动重试功能的最大重跑次数，目前支持重跑的错误类型为“Connection reset by peer”、“Lock wait timeout”和“Connection timed out”等，设定为0时关闭重跑功能。 参数类型：USERSET 取值范围：整型，0~20

查看更多 →

SparkHivetoHbase。 样例代码获取方式请参考获取 MRS 应用开发样例工程。 代码样例： /** * 从hive表读取数据，根据key值去hbase表获取相应记录，把两者数据做操作后，更新到hbase表 */ public class SparkHivetoHbase {

查看更多 →

左外连接 功能描述 根据左表的记录去匹配右表，返回所有左表记录，没有匹配值的记录的返回NULL。 语法格式 1 2 SELECT attr_expr_list FROM table_reference LEFT OUTER JOIN table_reference ON join_condition;

查看更多 →

huawei.bigdata.spark.examples.SparkHivetoHbase /** * 从hive表读取数据，根据key值去hbase表获取相应记录，把两者数据做操作后，更新到hbase表 */ public class SparkHivetoHbase {

查看更多 →

Array of AttrPairRules objects 属性对保留。 deduplication_list 否 Array of Deduplication objects 属性去重。 attribute_info 否 AttributeInfo object 综合排序信息。 bloom_filter_conf

查看更多 →

在集群的每一个DN实例上保留一份。主要适用于记录集较小的表。这种存储方式的优点是每个DN上都有该表的全量数据，在join操作中可以避免数据重分布操作，从而减小网络开销，同时减少了plan segment(每个plan segment都会起对应的线程)；缺点是每个DN都保留了表的完

查看更多 →

企业项目（Enterprise Project） 实施重分布 "dws:redistribution:operate" "dws:*:get*", "dws:*:list*", 支持： 项目（Project） 企业项目（Enterprise Project） 查询重分布 "dws:redistributionInfo:list"

查看更多 →

在集群的每一个DN实例上保留一份。主要适用于记录集较小的表。这种存储方式的优点是每个DN上都有该表的全量数据，在join操作中可以避免数据重分布操作，从而减小网络开销，同时减少了plan segment(每个plan segment都会起对应的线程)；缺点是每个DN都保留了表的完

查看更多 →

划。 JOIN：尽可能生成基于join的gather路径，在能下推的join子计划上面（join下面不包含重分布节点）添加gather路径，剩余计划在CN上执行。对于需要重分布节点的join计划则无法生成基于join的gather路径，会回退生成基于基表的gather路径。 在指

查看更多 →

询出来的备份 service_metadata参数说明 参数 参数类型 描述 DL int 0:非重删+非压缩；1：重删+非压缩；2：非重删+压缩；3：重删+压缩。无此键时为0（非重删+非压缩） VK string 加密卷的加密VK,长度为64字符 bootable boolean

查看更多 →

Array of AttrPairRules objects 属性对保留。 deduplication_list 否 Array of Deduplication objects 属性去重。 attribute_info 否 AttributeInfo object 综合排序信息。 bloom_filter_conf

查看更多 →

by列且均不为分布列，进行重分布时会选择某一group by列进行重分布。本参数控制选择重分布列的策略。 该参数属于USERSET类型参数，请参考表1中对应设置方法进行设置。 取值范围：布尔型 on表示会选择估算distinct值最多的一个可重分布列作为重分布列。 off表示会选择第一个可重分布列为重分布列。

查看更多 →

在线扩容重分布场景中，如果普通表和分区表正在重分布，交换分区语句有可能中断正在重分布的普通表或分区表（取决于交换分区和重分布语句是否产生锁冲突），通常重分布的普通表或分区表被中断后会重试2次，但同一个表交换分区执行过于频繁可能导致普通表或分区表多次重试重分布都失败。如果普通表重分布过程被交换分区操作打

查看更多 →

Array of AttrPairRules objects 属性对保留。 deduplication_list Array of Deduplication objects 属性去重。 attribute_info AttributeInfo object 综合排序信息。 bloom_filter_conf

查看更多 →

indexonlyscan的hint。 指定子链接块名的Hint。 指定倾斜信息的Hint，仅支持Join与HashAgg的重分布过程倾斜。 指定Agg重分布列Hint。仅8.1.3.100及以上集群版本支持。 指定配置参数值的Hint，仅支持部分配置参数，详见配置参数的hint。

查看更多 →

建立Hive表分区提升查询效率 操作场景 Hive在做Select查询时，一般会扫描整个表内容，会消耗较多时间去扫描不关注的数据。此时，可根据业务需求及其查询维度，建立合理的表分区，从而提高查询效率。 操作步骤 以root用户登录已安装Hive客户端的节点。 执行以下命令，进入客

查看更多 →

以为broadcast或者redistribute，表示对数据进行广播或者重分布。 语法格式 1 [no] broadcast|redistribute( [@queryblock] table_list) 参数说明 @queryblock 见指定Hint所处于的查询块Quer

查看更多 →

是否是增量备份 service_metadata参数说明 参数 参数类型 描述 DL int 0:非重删+非压缩；1：重删+非压缩；2：非重删+压缩；3：重删+压缩。无此键时为0（非重删+非压缩） VK string 加密卷的加密VK,长度为64字符 bootable boolean

查看更多 →