当“使用外部数据源存储元数据”开启时，选择数据连接类型为“RDS服务MySQL数据库”，数据连接实例选择已创建的数据连接实例，或单击“创建数据连接”新创建一个数据连接。 图2 使用RDS服务MySQL数据库 当用户选择的数据连接为“RDS服务MySQL数据库”时，请确保使用的数

查看更多 →

支持按文件分片。 MRS HBase 支持按HBase的Region分片。 MRS Hive HDFS读取方式时，支持按Hive文件分片。 JDBC读取方式时，不支持分片。 FusionInsight HDFS 支持按文件分片。 FusionInsight HBase 支持按HBase的Region分片。

查看更多 →

5%属于正常误差范围内。 HBase安全集群任务与非安全集群任务不能同时执行。HBase安全集群需要加载认证信息，非安全集群连接时需要清除安全集群的认证信息，因此不能同时执行。 当源端服务（包含但不限于Lindorm、HBase）因欠费被锁定时，虽然可以正常创建数据连接和校验任务，但由于

查看更多 →

连接参数说明 关系数据库连接 OBS连接 HDFS连接 HBase连接 CloudTable连接 Hive连接 FTP/SFTP连接 MongoDB连接 Redis连接 Kafka连接 DIS连接 Elasticsearch/ 云搜索服务 ( CSS )连接 DLI 连接 DMS Kafka连接

查看更多 →

大数据校验 新增大数据校验数据连接时，凭证列表数据缺失 Hive校验结果中的源端数据和目的端数据显示为“0”或“-1” Hive校验的sum统计结果显示未达标 DLI校验任务出现大量失败表 Delta 数据量较大时，如何优化校验任务？ 创建HBase目的端连接安全集群下的换包操作指南 MRS

查看更多 →

程序-SparkStreaming批量写入HBase表 Python SparkHbasetoHbaseJavaExample 从HBase读取数据再写入HBase Java SparkHbasetoHbaseScalaExample 从HBase读取数据再写入HBase Scala SparkHbasetoHbasePythonExample

查看更多 →

程序-SparkStreaming批量写入HBase表 Python SparkHbasetoHbaseJavaExample 从HBase读取数据再写入HBase Java SparkHbasetoHbaseScalaExample 从HBase读取数据再写入HBase Scala SparkHbasetoHbasePythonExample

查看更多 →

Loader作业目的连接配置说明 基本介绍 Loader作业需要将数据保存到不同目的存储位置时，应该选择对应类型的目的连接，每种连接在该场景中需要配置连接的属性。 obs-connector 表1 obs-connector目的连接属性 参数 说明 桶名 保存最终数据的OBS文件系统。

查看更多 →

导出查询结果相关语法 导出查询结果 跨源连接HBase表相关语法 创建表关联HBase 插入数据至HBase表 查询HBase表 跨源连接OpenTSDB表相关语法 创建表关联OpenTSDB 插入数据至OpenTSDB 查询OpenTSDB表 跨源连接DWS表相关语法 创建表关联DWS

查看更多 →

入”。 “连接”选择一个连接。默认没有已创建的连接，单击“添加”创建一个新的连接，完成后单击“测试”，测试是否可用，待提示成功后单击“确定”。 MRS与外部数据源交换数据和文件时需要连接数据源，“连接”表示连接数据源时的连接参数集合。 表1 连接配置参数一览表 连接器类型 参数名

查看更多 →

丢失问题。 Hive监控增强适配。 解决Hive localTask并发较大时导致本地/opt/Bigdata/tmp文件inode满的问题。 解决Hive对接外部LDAP的时候，客户需要支持 域名 的方式连接，当前Hive只支持IP的方式进行连接的问题。 解决HiveConction异常未打印，影响问题定位的问题。

查看更多 →

FusionInsight HBase建议使用的版本： 2.1.X 1.3.X FusionInsight Hive建议使用的版本： 1.2.X 3.1.X FusionInsight HBase FusionInsight Hive Apache HBase 数据仓库 ：数据仓库服务（DWS）， 数据湖探索 （DLI）

查看更多 →

HiveServer滚动重启时，若仍有客户端连接到滚动重启的HiveServer上，客户端正在运行的任务将失败 重启Hive服务期间，若仍有客户端连接HiveServer提交任务，可能导致任务运行失败 HiveServer滚动重启时，将等待客户端连接断开，最长等待30分钟 Mapreduce 直接重启

查看更多 →

参数配置完成后，单击“测试连接”，系统会校验配置信息并与组件建立连接，测试通过代表与组件连接成功。 测试连接通过后，单击“确认”按钮，创建大数据组件连接完成。 在连接管理页面，可以查看创建的连接列表以及基本信息。单击操作列的“修改连接”，可以修改连接参数配置。 父主题： 创建源端连接

查看更多 →

连接参数说明 关系数据库连接 OBS连接 HDFS连接 HBase连接 CloudTable连接 Hive连接 FTP/SFTP连接 MongoDB连接 Redis连接 Kafka连接 DIS连接 Elasticsearch/ 云搜索 服务( CS S)连接 DLI连接 CloudTable

查看更多 →

单击tab页中的“连接设置”，弹出连接页面。 单击左上角“新建连接”创建MRS Hive连接。 新建连接类型：非安全认证hive on hdfs，认证类型选择SIMPLE，OBS按钮关闭状态。 表1 参数说明 参数 描述 名称 根据连接的数据源类型，用户可以自定义连接名。 说明： 必须以字母开头，由字母、数字、

查看更多 →

通过主机连接，用户可以在 DataArts Studio 数据开发中连接到指定的主机，通过脚本开发和作业开发在主机上执行Shell或Python脚本。主机连接保存连接某个主机的连接信息，当主机的连接信息有变化时，只需在主机连接管理中编辑修改，而不需要到具体的脚本或作业中逐一修改。 父主题：

查看更多 →

HBase表。以授予用户在Hive中查询HBase表的权限为例，操作步骤如下 在MRS Manager角色管理界面创建一个HBase角色，例如“hive_hbase_create”，并授予创建HBase表的权限。 在“权限”的表格中选择“HBase > HBase Scope >

查看更多 →

Hadoop组件jar包位置和环境变量的位置在哪里？ 如何查看HBase日志？ HBase表如何设置和修改数据保留期？ 如何修改HDFS的副本数？ 如何修改HDFS主备倒换类？ DynamoDB的number在Hive表中用什么类型比较好？ Hive查询数据是否支持导出？ Hive使用beeline -e执行多条语句报错如何处理？

查看更多 →

单击tab页中的“连接设置”，弹出连接页面。 单击左上角“新建连接”创建MRS Hive连接。 新建连接类型：非安全认证hive on OBS，认证类型选择SIMPLE，OBS按钮开启状态。 表1 参数说明 参数 描述 名称 根据连接的数据源类型，用户可以自定义连接名。 说明： 必

查看更多 →

对系统的影响 系统执行业务能力过低，无法正常响应客户请求，对Hive服务无影响，需要检查HiveServer日志排查SQL失败原因。 可能原因 HQL命令语法错误。 执行Hive on HBase任务时HBase服务异常。 执行Hive on Spark任务时Spark服务异常。 依赖的

查看更多 →