图解应用与数据集成平台

查看更多 →

软通动力数据中台及数据治理服务解决方案采用“轻量化、高解耦、全场景、零代码”的架构设计，具备多部署模式、灵活产品组合、无缝集成对接等核心特性，且能够提供数据中台咨询、实施及运维专业端到端服务。 应用场景 数据使能咨询、数据集成与开发、工业物联数据采集与分析、数据治理与数据安全实施

查看更多 →

CICD持续集成与交付 使用说明 AstroZero通过对接软件开发生产线（CodeArts）和代码托管（CodeArts Repo），提供应用代码托管、代码检查、代码编译、验证、部署、发布功能，实现软件持续集成（Continuous Integration，简称CI）和持续交付（Continuous

查看更多 →

为构建集约化、高效化、透明化的政府治理与运行模式提供支撑。 方案价值 整合各类数据资源，打通各个业务系统单独建设形成的数据孤岛，建成覆盖各部门系统“全业务”的信息系统以及各类数据的集中、共享与交换，更好地满足公众服务和行业管理需要； 积极推进政府各项业务工作跨部门、跨地区、跨层级

查看更多 →

多维模型是由数字型度量值组成的一张事实表连接到一组包含描述属性的多张维度表，事实表与维度表通过主/外键实现关联。 典型的维度模型有星形模型，以及在一些特殊场景下使用的雪花模型。 在 DataArts Studio 数据架构中，维度建模是以维度建模理论为基础，构建总线矩阵、抽象出事实和维度，构建

查看更多 →

数据架构支持逆向数据库吗？ 问题描述 数据架构是否支持逆向数据库。 解决方案 数据架构支持逆向数据库。 父主题： 数据架构

查看更多 →

Insight无缝集成华为云 数据仓库 服务、支持本地 CS V、在线API及企业内部私有云数据；满足您各类大数据实时计算、监控的需求，充分发挥大数据计算的能力。 拖拽即可完成组件自由配置与布局、所见即所得，无需编程就能轻松搭建可视化大屏。 DataArts Insight特别针对拼接大屏端的展示

查看更多 →

创建存算分离集群 修改集群参数 备份与恢复 变配与扩容 审计日志 监控集群 Region内集群容灾 智能运维 数据库用户管理 运维账户 集群日志管理 启停集群 资源负载管理 资源管理 逻辑集群管理 实时/历史TopSQL查询 数据源管理 管理 MRS 数据源 管理OBS数据源 管理LakeFormation数据源

查看更多 →

Engineer 培训与认证具备敏捷开发和管理以及实现企业DevOps转型能力的云服务DevOps高级工程师。 通过HCIP-Cloud Service DevOps Engineer认证，将证明您掌握端到端DevOps全流程，包括持续规划与设计、持续开发与集成、持续测试与反馈、持续安全与审计、

查看更多 →

图解数据仓库服务

查看更多 →

以某行业客户为例，客户的需求为构建全公司统一的数据平台，在数据平台中对数据进行治理，并支撑上层的数据应用。 根据客户现有数据量，以及考虑到增量的数据集成方式、数据入湖入仓的膨胀系数、以及客户对平台性能的要求，设计了以下的资源与成本清单。实际收费应以账单为准： 资源与成本清单 表1 云服务清单 云资源

查看更多 →

什么是咨询与规划服务？ 数据仓库咨询与规划服务是指为企业或组织提供关于数据仓库的咨询和规划服务。这些服务旨在帮助企业或组织更好地理解和利用数据仓库，以实现业务目标和增加竞争力。具体来说，数据仓库咨询与规划服务包括以下方面： 数据分析和挖掘：通过对企业或组织的数据进行分析和挖掘，帮

查看更多 →

数据集成任务管理 查看数据集成任务 导入导出数据集成任务 附录：QuartZ Cron表达式配置说明 父主题： 数据集成指导

查看更多 →

数据集成（实时作业） 问题案例总览 数据源和资源组网络不通如何排查？ 数据源安全组放通哪些端口可满足Migration访问？ 如何配置Hudi Compaction的Spark周期任务？ MySQL到DWS实时同步中，同步新增列的DDL时报错怎么办？ MySQL到DWS实时同步中

查看更多 →

数据集成（离线作业） 离线作业概述 支持的数据源 新建离线处理集成作业 配置离线处理集成作业 配置作业源端参数 配置作业目的端参数 字段转换器配置指导 新增字段操作指导

查看更多 →

数据集成API概览 表1 数据集成API类型 类型 说明 集群管理 集群管理类型接口。 作业管理 作业管理类型接口。 连接管理 连接管理类型接口。 集群管理 表2 集群管理 API 说明 流控策略 查询集群详情 查询集群详情接口。 cdm_common 删除集群 删除集群接口。 cdm_b

查看更多 →

依据数据集成入湖清单展开数据探查，重点探查与分析表与字段注释、数据类型、数据长度、数据量、数据主键、时间戳字段以及数据空值及分布情况等内容。在获取数据接入授权与数据源端连接信息后，确定数据探查方法并实施探查，参照数据标准与数据集成需求对探查结果进行分析，最终输出数据探查分析结果，形成问题清单，指导数据集成方案设计。

查看更多 →

myregion.mycloud.com 端口 数据传输协议端口，https是443，http是80。 443 OBS桶类型 用户下拉选择即可，一般选择为“对象存储”。 对象存储 访问标识(AK) AK和SK分别为登录OBS 服务器 的访问标识与密钥。 您需要先创建当前账号的访问密钥，并获得对应的AK和SK。

查看更多 →

单击“显示高级属性”，可配置“抽取并发数”以及“是否写入脏数据”，如图12所示。 抽取并发数：您可以根据业务量进行配置。数据源端如果是文件类型，当有多个文件时，增大并发数可以提升抽取速率。 是否写入脏数据：建议配置为“是”，然后参考图12配置相关参数。脏数据是指与目的端字段不匹的数据，该数据可以被记录到指定的OBS

查看更多 →

CDM 迁移作业的抽取并发量，与集群规格和表大小有关。 按集群规格建议每1CUs（1CUs=1核4G）配置为4。 表每行数据大小为1MB以下的可以多并发抽取，超过1MB的建议单线程抽取数据。 是否写入脏数据：建议配置为“是”，然后参考图10配置相关参数。脏数据是指与目的端字段不匹的数据，该数据可以被记

查看更多 →

date Date timestamp DateTime 数据比较任务 数据比对即是对源端数据库中的数据和目标端Hive中的数据作数据一致性校验，如果数据不一致，CDL可以尝试修复不一致的数据。相关操作请参见创建CDL数据比较任务作业。 父主题： 使用CDL

查看更多 →