数据仓库服务 GaussDB(DWS)

 

GaussDB(DWS)是一款具备分析及混合负载能力的分布式数据库,支持x86和Kunpeng硬件架构,支持行存储与列存储,提供GB~PB级数据分析能力、多模分析和实时处理能力,用于数据仓库、数据集市、实时分析、实时决策和混合负载等场景,广泛应用于汽车、制造、零售、物流、互联网、金融、政府、电信等行业分析决策系统

 
 

    数据仓库系统为什么需要元数据 更多内容
  • 数据库、数据仓库、数据湖、湖仓一体分别是什么?

    础的运营式系统慢慢向决策支持系统发展。 数据仓库 相比数据库,主要有以下两个特点: 数据仓库是面向主题集成的。数据仓库是为了支撑各种业务而建立的,数据来自于分散的操作型数据。因此需要将所需数据从多个异构的数据源中抽取出来,进行加工与集成,按照主题进行重组,最终进入数据仓库。 数据仓

    来自:帮助中心

    查看更多 →

  • 元数据导出

    元数据导出 为了保持迁移后数据的属性及权限等信息在目标集群上与源集群一致,需要将源集群的元数据信息导出,以便在完成数据迁移后进行必要的元数据恢复。 需要导出的元数据包括HDFS文件属主/组及权限信息、Hive表描述信息。 HDFS元数据导出 HDFS数据需要导出的元数据信息包括文

    来自:帮助中心

    查看更多 →

  • 元数据迁移

    元数据迁移 使用gs_dump和gs_dumpall命令导出元数据 使用gs_restore导入数据

    来自:帮助中心

    查看更多 →

  • 迁移元数据

    迁移元数据 RocketMQ元数据迁移概述 迁移其他RocketMQ的元数据到RocketMQ实例 迁移RabbitMQ的元数据到RocketMQ实例

    来自:帮助中心

    查看更多 →

  • 管理元数据

    管理元数据 创建元数据存储路径 管理Catalog 管理数据库 管理数据表 管理函数

    来自:帮助中心

    查看更多 →

  • 删除元数据

    删除元数据元数据文件失效后,您可以在“元数据管理”页面,对应的元数据文件“操作”列中单击“删除”,来删除元数据文件。 数据删除后无法恢复,请谨慎操作。 图1 删除元数据 父主题: 元数据操作

    来自:帮助中心

    查看更多 →

  • 编辑元数据

    编辑元数据 如果导入或创建的元数据文件不符合业务诉求,需要进行变更,您可以通过编辑元数据对Label和Property进行修改。 编辑元数据文件完成后,将覆盖之前的元数据文件。为避免数据丢失,建议您在编辑前,先复制一份元数据操作步骤 在“元数据管理”页面,编辑元数据有两个入口:

    来自:帮助中心

    查看更多 →

  • 准备元数据

    准备元数据 本地准备元数据需要在本地准备好需要上传的元数据文件,将元数据文件导入到图引擎服务中以便后续创建图使用。 准备上传的元数据文件需要注意以下几点: 可导入的元数据文件数上限为50,达到上限将不能再继续导入元数据元数据文件的格式必须为xml格式。 导入元数据至OBS(可选)

    来自:帮助中心

    查看更多 →

  • 设置元数据

    设置元数据 概述 设置数据集的元数据信息。 输入 参数 子参数 参数说明 inputs dataframe inputs为字典类型,dataframe为pyspark中的DataFrame类型对象 输出 数据集 参数说明 参数 子参数 参数说明 column_type_map_str

    来自:帮助中心

    查看更多 →

  • 元数据迁移

    元数据迁移 新建元数据迁移任务 查询实例下所有迁移任务或查询指定迁移任务信息 删除元数据迁移任务 父主题: API V2(推荐)

    来自:帮助中心

    查看更多 →

  • 元数据发现

    元数据发现 操作场景 当数据存储在OBS并行文件系统中,而在LakeFormation还未与对应的元数据关联时,可以通过元数据发现,来构造这些数据对应的元数据信息,从而支撑SQL引擎或者用户的应用程序的计算与分析。 当前元数据发现特性属于公测阶段,公测期产品完全免费,商业化后会根据元数据发现消耗资源收取资源费用。

    来自:帮助中心

    查看更多 →

  • 元数据迁移

    迁移任务开始运行后,源数据库如果有新增的元数据,则新增的元数据将不会被迁移,需要再次运行迁移任务。也可以使用元数据发现功能,迁移新增的元数据,具体请参考元数据发现。 如果任务运行失败,在修复故障后可再次单击“操作”列的“运行”进行重试。 迁移任务完成后,可以在对应的元数据界面进行查看。例如进入“元数据 > 数据库”页面查看迁移完成的数据库。

    来自:帮助中心

    查看更多 →

  • 元数据锁

    元数据元数据锁(Metadata Lock, MDL),其作用是用于解决DDL操作与DML操作的一致性。通常DDL操作需要获取MDL写锁,并且MDL锁一旦发生,可能会影响数据库的性能,因为后续对该表的任何Select、DML、DDL操作都会被阻塞,造成连接积压。 该功能展示了

    来自:帮助中心

    查看更多 →

  • 复制元数据

    复制元数据 编辑元数据时,会覆盖之前的元数据文件,为避免原始元数据文件丢失,建议您在编辑元数据之前,先复制一份元数据操作步骤 在“元数据管理”页面,复制元数据有两个入口: 单击对应元数据文件名称,进入元数据详情页,在页面底端单击“复制”。 在对应的元数据文件的“操作”列,单击“复制”。

    来自:帮助中心

    查看更多 →

  • 查找元数据

    查找元数据 在“元数据管理”页面,您可以在搜索框中输入元数据文件的名称进行查找。 图1 查找元数据 父主题: 元数据操作

    来自:帮助中心

    查看更多 →

  • 元数据导出

    元数据导出 为了保持迁移后数据的属性及权限等信息在目标集群上与源集群一致,需要将源集群的元数据信息导出,以便在完成数据迁移后进行必要的元数据恢复。 需要导出的元数据包括HDFS文件属主/组及权限信息、Hive表描述信息。 HDFS元数据导出 HDFS数据需要导出的元数据信息包括文

    来自:帮助中心

    查看更多 →

  • 为什么有些作业启动时需要选择计算资源但有些作业不需要?

    为什么有些作业启动时需要选择计算资源但有些作业不需要? 为了节约用户成本,在启动作业时,系统自行对作业的复杂度进行了检查,如果作业仅包含“IoT设备接入数据源”、“产品过滤 ”、“数据存储输出”3种算子时,不需要单独的计算资源。 父主题: 管道作业常见问题

    来自:帮助中心

    查看更多 →

  • 与其他服务的关系

    云审计 服务记录LakeFormation服务相关的操作事件,方便用户日后的查询、审计和回溯。 对象存储服务 (Object Storage Service,OBS) LakeFormation服务的元数据所映射的实际业务数据,存储在OBS并行文件系统的目录和文件。 MapReduce服务 (MapReduce

    来自:帮助中心

    查看更多 →

  • 数据湖建设和持续运营

    行两次授权操作,对用户操作带来不便,易用性差。 LakeFormation服务优势 一站式可视化 湖仓构建 :提供 数据湖 元数据统一定义和授权的可视化界面,支持用户便捷操作,快速构建。 联动授权:支持在元数据授权的同时,自动化完成元数据所映射的文件目录的授权,使用户授权操作更便捷和高效。

    来自:帮助中心

    查看更多 →

  • 通用问题

    通用问题 为什么要使用数据仓库为什么要使用云数据仓库服务 GaussDB (DWS) ? 如何选择公有云GaussDB(DWS)或者公有云RDS? 用户和角色是什么关系? GaussDB(DWS)和 MRS 分别应在何时使用? 如何查看数据库用户的创建时间? 区域和可用分区 数据在数据仓库服务中是否安全?

    来自:帮助中心

    查看更多 →

  • 什么是冷却时间,为什么需要冷却时间?

    什么是冷却时间,为什么需要冷却时间? 冷却时间是指冷却伸缩活动的时间。每次伸缩活动完成之后,系统开始计算冷却时间。伸缩组在冷却时间内,会拒绝告警策略的触发,其他类型的伸缩策略(如定时策略和周期策略)及手动触发不受限制。 实例加入伸缩组投入使用之前,需要使用配置脚本安装和配置软件,

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了