模型采集支持采集的数据源类型有哪些？ 当前新版模型采集支持采集的数据源类型有：DAMENG、GAUSSDB、DORIS、MYSQL、OpenGauss、ORACLE、POSTGRESQL、SQL Server、DWS、FI Hive、Hive、OCEANBASE、SFTP，用于模型采集。

查看更多 →

status 是 Integer 脱敏功能的开关状态，0表示停止，1表示开启 type 是 String 数据类型,可选类型：OBS、DB、BIGDATA、 MRS _HIVE、DWS、ES、Hive、HBase、 DLI 。 响应参数 状态码：200 表3 响应Body参数 参数 参数类型 描述 msg

查看更多 →

DWS使用流程 数据仓库 服务是一种基于华为云基础架构和平台的在线数据处理数据库，提供即开即用、可扩展且完全托管的分析型数据库服务。DWS是基于华为融合数据仓库 GaussDB 产品的云原生服务，兼容标准ANSI SQL 99和SQL 2003，同时兼容PostgreSQL/Oracl

查看更多 →

Hive故障排除 如何对insert overwrite自读自写场景进行优化 Hive SQL运行变慢阶段如何排查 父主题： 使用Hive

查看更多 →

。 表1 Hive日志列表 日志类型 日志文件名 描述 运行日志 /hiveserver/hiveserver.out HiveServer运行环境信息日志 /hiveserver/hive.log HiveServer进程的运行日志 /hiveserver/hive-omm-<日期>-<PID>-gc

查看更多 →

开发Hive应用 Hive JDBC访问样例程序 HCatalog访问Hive样例程序 基于Python的Hive样例程序 基于Python3的Hive样例程序 父主题： Hive开发指南（普通模式）

查看更多 →

开发Hive应用 Hive JDBC访问样例程序 HCatalog访问Hive样例程序 基于Python的Hive样例程序 基于Python3的Hive样例程序 父主题： Hive开发指南（安全模式）

查看更多 →

开发Hive应用 Hive样例程序开发思路 创建Hive表 加载Hive数据 查询Hive数据 分析Hive数据 开发Hive用户自定义函数 父主题： Hive开发指南

查看更多 →

参数 是否必选 类型 说明 fromJobConfig.hive 否 String 待抽取数据的数据源，作业源端为Hive时，这里为“hive”。 fromJobConfig.database 否 String 待抽取数据的数据库，例如“default”。 fromJobConfig

查看更多 →

。 表1 Hive日志列表 日志类型 日志文件名 描述 运行日志 /hiveserver/hiveserver.out HiveServer运行环境信息日志 /hiveserver/hive.log HiveServer进程的运行日志 /hiveserver/hive-omm-<日期>-<PID>-gc

查看更多 →

导入数据到DWS最佳实践 导入OBS桶数据到DWS集群及从DWS导出数据到OBS桶 使用GDS从远端 服务器 上导入表数据到DWS集群 从MRS Hive导入表数据到DWS集群 使用EXTERNAL SCHEMA跨集群访问HiveMetaStore元数据 从DLI导入表数据到DWS集群 从DWS集群导出ORC数据到MRS集群

查看更多 →

Hive常用配置参数 Hive是建立在Hadoop上的数据仓库框架，提供大数据平台批处理计算能力，能够对结构化/半结构化数据进行批量分析汇总完成数据计算。 本章节主要介绍Hive常用参数。 操作步骤 登录 FusionInsight Manager，选择“集群 > 服务 > Hive

查看更多 →

数据仓库服务DWS接入LTS 支持数据仓库服务DWS日志接入LTS。 具体接入方法请参见查看DWS集群其他日志。 父主题： 使用云服务接入LTS

查看更多 →

迁移RDS数据至DLI 介绍如何通过 CDM 数据同步功能，迁移关系型数据库RDS数据至DLI。 迁移DWS数据至DLI 介绍如何通过CDM数据同步功能，迁移数据仓库服务DWS数据至DLI。

查看更多 →

脱敏功能的开关状态，0表示停止，1表示开启 type 是 String 数据类型,可选类型：OBS、DB、BIGDATA、MRS_HIVE、DWS、ES、Hive、HBase、DLI。 响应参数 状态码：200 表3 响应Body参数 参数 参数类型 描述 msg String 返回的消息内容，用于描述操作结果

查看更多 →

查询Hive表数据 功能介绍 本小节介绍了如何使用HQL对数据进行查询分析。从本节中可以掌握如下查询分析方法： SELECT查询的常用特性，如JOIN等。 加载数据进指定分区。 如何使用Hive自带函数。 如何使用自定义函数进行查询分析，如何创建、定义自定义函数请见创建Hive用户自定义函数。

查看更多 →

查询Hive表数据 功能介绍 本小节介绍了如何使用HQL对数据进行查询分析。从本节中可以掌握如下查询分析方法： SELECT查询的常用特性，如JOIN等。 加载数据进指定分区。 如何使用Hive自带函数。 如何使用自定义函数进行查询分析，如何创建、定义自定义函数请见创建Hive用户自定义函数。

查看更多 →

注意事项 Join数据倾斜问题。执行任务的时候，任务进度长时间维持在99%，这种现象叫数据倾斜。 数据倾斜是经常存在的，因为有少量的Reduce任务分配到的数据量和其他Reduce差异过大，导致大部分Reduce都已完成任务，但少量Reduce任务还没完成的情况。 解决数据倾斜的问题，可通过设置“set

查看更多 →

Hive同步数据报错HoodieHiveSyncException 问题 Hive同步数据时报错： com.uber.hoodie.hive.HoodieHiveSyncException: Could not convert field Type from <type1> to

查看更多 →

见准备连接Hive集群配置文件。 配置安全登录 安全认证主要采用代码认证方式，支持Oracle JAVA平台和IBM JAVA平台。 以下代码在“hive-examples/hive-jdbc-example”样例工程的“com.huawei.bigdata.hive.examp

查看更多 →

Hive同步数据报错HoodieHiveSyncException 问题 Hive同步数据时报错： com.uber.hoodie.hive.HoodieHiveSyncException: Could not convert field Type from <type1> to

查看更多 →