141：binlog文件中的位置信息。 #210309 9:28:36：时间戳信息，表示写入此条binlog的时间为UTC时间21年3月9日 9点28分36秒。 Query thread_id：表示线程号。 mysqlbinlog的常用参数： --start-position：表示从指定的起始位置开始解析。

查看更多 →

定义函数的用户： 用户名：填写用户名称，例如：test。 用户类型：选择“人机”用户。 “密码”和“确认新密码”输入该用户对应的密码。 用户组：单击“添加”，选择“hive”和“hadoop”用户组并单击“确定”。 根据集群的认证模式及是否启用Ranger鉴权为新创建的用户赋权：

查看更多 →

导入和快速导入、导出和快速导出功能对比 对比项 说明 相关操作 导入 将外部镜像文件导入华为云控制台，制作成私有镜像。 支持的格式包括：vmdk、vhd、qcow2、raw、vhdx、qed、vdi、qcow、zvhd2和zvhd。 最大可支持128GB。 导入过程中系统会在后台

查看更多 →

基于Python的Hive样例程序 功能介绍 本章节介绍如何使用Python连接Hive执行数据分析任务。 样例代码 使用Python方式提交数据分析任务，参考样例程序中的“hive-examples/python-examples/pyCLI_sec.py”。该样例程序连接的集群的认证模

查看更多 →

Hive分区修剪的谓词下推增强 配置场景 在旧版本中，对Hive表的分区修剪的谓词下推，只支持列名与整数或者字符串的比较表达式的下推，在2.3版本中，增加了对null、in、and、or表达式的下推支持。 配置参数 登录 FusionInsight Manager系统，选择“集群 >

查看更多 →

SQL限流 针对新上业务不能及时发包优化的SQL和突发流量导致CPU等资源100%瓶颈的场景，SQL限流功能通过控制既定SQL规则的并发度协助业务侧及时流控，保证核心业务的稳定运行。更多内容请参见新建SQL限流规则。 父主题： 问题诊断和SQL分析

查看更多 →

目标库的GTID功能检查 在进行实时灾备时，需要目标数据库开启GTID功能。目标数据库GTID关闭情况下，目标数据库存在主备切换时，可能会导致任务失败。 不通过原因 目标数据库GTID未开启。 处理建议 目标数据库是RDS for MySQ L实例 时，GTID默认为开启状态且不支持

查看更多 →

如果HiveServer实例被迁移，原始的示例程序会失效。在HiveServer实例迁移之后，用户需要更新示例程序中使用的HiveServer的IP地址。 在HAConnection的第三个参数填写正确的用户名，密码可以不填写。创建连接，执行HQL，样例代码中仅执行查询所有表功能，可根据实际情况修改HQL内容，输出查询的列名和结果到控制台。

查看更多 →

配置Hive任务的最大map数 操作场景 此功能适用于Hive。 此功能用于从服务端限定Hive任务的最大map数，避免HiveSever服务过载而引发的性能问题。 操作步骤 进入Hive服务配置页面： MRS 3.x之前版本，单击集群名称，登录集群详情页面，选择“组件管理 > Hive

查看更多 →

Hive分区修剪的谓词下推增强 配置场景 在旧版本中，对Hive表的分区修剪的谓词下推，只支持列名与整数或者字符串的比较表达式的下推，在2.3版本中，增加了对null、in、and、or表达式的下推支持。 配置参数 登录FusionInsight Manager系统，选择“集群 >

查看更多 →

主机迁移服务的功能 迁移可行性校验 Windows 全量迁移与同步 Linux 全量迁移与同步 动态安全传输通道

查看更多 →

升级CodeArts Repo的SSH功能 代码托管服务 SSH功能下线部分不安全的加密算法。 当前KEX (Key Exchange)和MAC(消息验证码)不再支持以下算法。 KEX (Key Exchange)不支持算法如下： diffie-hellman-group18-sha512

查看更多 →

源库的GTID功能检查 在进行数据迁移时，需要源数据库开启GTID功能。源数据库GTID关闭情况下，源数据库存在主备切换时，可能会导致任务失败。 不通过原因 源数据库GTID未开启。 处理建议 源数据库是RDS for MySQL实例时，GTID默认为开启状态且不支持关闭。如果GTID未开启，需要联系RDS

查看更多 →

基于Python的Hive样例程序 功能介绍 本章节介绍如何使用Python连接Hive执行数据分析任务。 样例代码 使用Python方式提交数据分析任务，参考样例程序中的“hive-examples/python-examples/pyCLI_sec.py”。该样例程序连接的集群的认证模

查看更多 →

配置Hive任务的最大map数 “hive.mapreduce.per.task.max.splits”参数可用于从服务端限定Hive任务的最大map数，避免HiveSever服务过载而引发的性能问题。 操作步骤 登录FusionInsight Manager页面，选择“集群 >

查看更多 →

使用Hcatalog方式同步Hive和MySQL之间的数据，timestamp和data类型字段会报错 问题 使用Hcatalog方式同步Hive和MySQL之间的数据，timestamp和data类型字段会报错： 回答 调整Sqoop源码包中的代码，将timestamp强制转换类型和Hive保持一致。

查看更多 →

出于数据隐私性保护目的，DAS需要您提供一个您自己的OBS存储，用来接收您上传的附件信息，然后DAS会自动连接到该OBS文件，进行内存式读取，整个过程您的数据内容不会落盘在DAS的任何存储介质上。 导入完成后若勾选删除上传的文件选项，则该文件导入目标数据库成功后，将从OBS桶中自动删除。

查看更多 →

一个表可以拥有一个或者多个分区，每个分区以文件夹的形式单独存在表文件夹的目录下。对分区内数据进行查询，可缩小查询范围，加快数据的检索速度和可对数据按照一定的条件进行管理。 分区是在创建表的时候用PARTITIONED BY子句定义的。 CREATE EXTERNAL TABLE

查看更多 →

like '%cn'; 扩展使用 配置Hive中间过程的数据加密 指定表的格式为RCFile(推荐使用)或SequenceFile，加密算法为ARC4Codec。SequenceFile是Hadoop特有的文件格式，RCFile是Hive优化的文件格式。RCFile优化了列存储，在

查看更多 →

address STRING) -- 一个表可以拥有一个或多个分区，每个分区以文件夹的形式单独存在表文件夹的目录下。对分区内数据进行查询，可缩小查询范围，加快数据的检索速度，还可对数据按照一定的条件进行管理。 -- 使用关键字PARTITIONED BY指定分区列名及数据类型 PARTITIONED

查看更多 →

开发Hive应用 Hive JDBC访问样例程序 HCatalog访问Hive样例程序 Python访问Hive样例程序 Python3访问Hive样例程序 父主题： Hive开发指南（普通模式）

查看更多 →