记录数据迁移入库时间 CDM 在创建表/文件迁移的作业，支持连接器源端为关系型数据库时，在表字段映射中使用时间宏变量增加入库时间字段，用以记录关系型数据库的入库时间等用途。 前提条件 已创建连接器源端为关系型数据库，以及目的端数据连接。 目的端数据表中已有时间日期字段或时间戳字段。

查看更多 →

ALM-16001 Hive 数据仓库 空间使用率超过阈值 告警解释 系统每30秒周期性检测Hive数据仓库空间使用率，该指标可在Hive服务监控界面查看，指标名称为“Hive已经使用的HDFS空间占可使用空间的百分比”。Hive数据仓库空间使用率指标默认提供一个阈值范围（85%），

查看更多 →

实时迁移、实时同步和实时灾备有什么区别 对比项 实时迁移 实时同步 实时灾备 适用场景 跨云平台数据库迁移、云下数据库迁移上云或云上跨区域的数据库迁移等多种业务场景迁移。 实时分析，报表系统，数仓环境等。 实现云下数据库到云上的灾备、跨云平台的数据库灾备。 特点 同构数据库间以整体数据库搬迁为目的。

查看更多 →

记录数据迁移入库时间 CDM在创建表/文件迁移的作业，支持连接器源端为关系型数据库时，在表字段映射中使用时间宏变量增加入库时间字段，用以记录关系型数据库的入库时间等用途。 前提条件 已创建连接器源端为关系型数据库，以及目的端数据连接。 目的端数据表中已有时间日期字段或时间戳字段。

查看更多 →

记录数据迁移入库时间 CDM在创建表/文件迁移的作业，支持连接器源端为关系型数据库时，在表字段映射中使用时间宏变量增加入库时间字段，用以记录关系型数据库的入库时间等用途。 前提条件 已创建连接器源端为关系型数据库，以及目的端数据连接。 目的端数据表中已有时间日期字段或时间戳字段。

查看更多 →

ALM-16001 Hive数据仓库空间使用率超过阈值（2.x及以前版本） 告警解释 系统每30秒周期性检测Hive数据仓库空间使用率，该指标可在Hive服务监控界面查看，指标名称为“Hive已经使用的HDFS空间占可使用空间的百分比”。Hive数据仓库空间使用率指标默认提供一个

查看更多 →

统一数仓构建 ：一个平台满足统一的数据仓库建设需求，简化繁琐的大数据软件栈。Doris构建的统一数仓，替换了原来由Spark、Hive、Kudu、HBase、Phoenix组成的旧架构，架构大大简化。 数据湖 联邦查询：通过外表的方式联邦分析位于Hive中的数据，在避免数据拷贝的前提下，查询性能大幅提升。

查看更多 →

Hive 创建hive catalog 通过连接Hive Metastore，或者兼容Hive Metastore的元数据服务，Doris可以自动获取Hive的库表信息，并进行数据查询。 除了Hive外，很多其他系统也会使用Hive Metastore存储元数据。所以通过Hive

查看更多 →

HDFS分布式文件系统和 ZooKeeper 12% Hive 分布式数据仓库 10% HBase技术原理 11% MapReduce 和 Yarn 技术原理 9% Spark 基于内存的分布式计算 7% Flink 流批一体分布式实时处理引擎 8% Flume海量日志聚合 7% Loader

查看更多 →

Hive 创建Hive Catalog Hive方言 Hive源表 Hive结果表 Hive维表 使用Temporal join关联维表的最新分区 使用Temporal join关联维表的最新版本 父主题： Connector列表

查看更多 →

Hive Hive基本原理 Hive CBO原理介绍 Hive与其他组件的关系 Hive开源增强特性 父主题： 组件介绍

查看更多 →

Flink作业将分布式消息服务Kafka的消费数据实时同步至DWS数据仓库，实现Kafka实时入库到DWS的过程。 本实践预计时长90分钟，实践用到的云服务包括 虚拟私有云VPC 及子网、弹性负载均衡ELB、 弹性云服务器 E CS 、 对象存储服务 OBS、分布式消息服务Kafka、 数据湖探索 DLI和数据仓库服务DWS 调优表

查看更多 →

数据如何存储到数据仓库服务？ GaussDB (DWS)支持多数据源高效入库，典型的入库方式如下所示。详细指导请参见导入数据。 从OBS导入数据。 数据上传到OBS对象存储服务中，再从OBS中导入，支持CSV，TEXT格式数据。 通过INSERT语句直接插入数据。 用户可以通过Ga

查看更多 →

删除实时作业 功能介绍 删除用户指定的作业 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI DELETE /v1/{project_id}/streaming/jobs/{job_id}

查看更多 →

实时作业操作 启动实时作业 停止实时作业 父主题： API列表

查看更多 →

实时分析 作业开发 作业调试 作业运行

查看更多 →

支持查询最近24小时的实时数据。 支持查询的时间跨度最长为24小时。 操作步骤 登录实时音视频控制台。 在左侧导航栏中，选择“视镜（beta） > 实时数据”，进入实时数据页面。 输入应用ID或选择目标应用名称/ID，即可查看到目标应用中的实时监控数据。 您可以根据实际需求选择查看以下维度的实时监控数据：

查看更多 →

实时灾备 实时灾备支持的数据库和版本信息可参考支持的数据库。 目前部分功能仅支持白名单用户使用，需要提交工单申请才能使用。您可以在管理控制台右上角，选择“工单 > 新建工单”，完成工单提交。 网络准备 数据复制服务 支持通过多种方式的网络进行数据灾备，包括：VPN网络、专线网络和公

查看更多 →

”。 如需查看SLB指标，需要使用相应组件。 查看实时监控 进入运维中心工作台。 在顶部导航栏选择自有服务。 单击，选择“运维 > 监控服务（ServiceInsight）”。 选择左侧导航栏的“监控 > 实时监控”。 在“实时监控”页面，查看服务的各项指标监控，如图1所示。 图1

查看更多 →

实时灾备 RDS for MySQL通过DRS搭建异地单主灾备

查看更多 →

实时灾备 DRS灾备的RPO、RTO是什么 双主灾备的主1、主2如何选择 双主灾备子任务的正向和反向怎么理解 实时灾备常见异常场景示例 灾备任务的主备倒换是自动触发，还是手动触发 实时灾备是否支持指定库进行灾备 DDM灾备任务源库填写说明 为什么实时灾备任务不支持触发器（TRIGGER）和事件（EVENT）

查看更多 →