大数据校验概述 迁移中心 MgC为多种大数据计算/存储引擎，如Hive、Hbase、Doris和MaxCompute等，提供了一致性校验方法。通过一致性校验，您可以更加放心地进行大数据迁移操作，确保数据的准确性和可靠性，从而避免了数据丢失或不一致的风险。 校验方式说明 全量校验：

查看更多 →

大数据数据迁移 使用须知 准备工作 创建源端连接 创建目的端连接 迁移实施 查看并导出执行结果 自定义参数说明

查看更多 →

对接大数据组件 支持的大数据组件简介 Hadoop对接OBS Hive对接OBS Spark对接OBS Presto对接OBS Flume对接OBS DataX对接OBS Druid对接OBS Flink对接OBS Logstash对接OBS 父主题： 大数据场景下使用OBS实现存算分离

查看更多 →

功耗密集型业务（如高性能计算、人工智能、深度学习等场景）主要就是消耗计算维度的容量。 内存密集型业务（如大数据处理、图像/视频处理、游戏开发、数据库等场景）主要消耗内存和存储维度的容量。 存储密集型业务（如大型数据库、大数据分析、大规模文件存储、编译构建等场景）可能会比较消耗存储的带宽。 根据业务的特征选

查看更多 →

数据一旦成为数据商品并达到一定交易量，就会形成数据相关的应收账款，还有存货相关的抵押账款等，这些款项都能形成业内所说的金融资产。只有形成了众多金融资产，才能构建金融资产池，步入金融化。金融化的实现模式往往是证券化，形成存量资产的后续影响是数据的货币化。一旦数据资产能实现证券化，从某种意义上数据本身就变成了货币。

查看更多 →

存储在多个节点上，数据分析任务被推送到数据所在位置就近执行，并行地完成大规模的数据处理工作，实现对数据处理的快速响应。 图4 产品架构 应用层 数据加载工具、ETL（Extract-Transform-Load）工具、以及商业智能BI工具、数据挖掘和分析工具，均可以通过标准接口与

查看更多 →

格，帮助客户自动完成华为云企业级大数据平台的安装部署和参数调优。 MRS 服务为客户提供完全可控的大数据集群，客户在创建时可设置虚拟机的登录方式（密码或者密钥对），所创建的MRS集群资源完全归客户所用。同时MRS支持在两节点4U8G的E CS 上部署大数据集群，为客户测试开发提供更多的灵活选择。

查看更多 →

工具接口 创建图片Metadata 配置并切换用户 导入用户证书秘钥并切换用户 生成私钥和证书 生成数字资产标识 生成数字资产编码 父主题： Java

查看更多 →

工具接口 创建图片Metadata 配置并切换用户 导入用户证书秘钥并切换用户 生成私钥和证书 生成数字资产标识 生成数字资产编码 父主题： PHP

查看更多 →

工具平台 API生产阶段 API中心通过对接集成，为API开发者提供API Arts等自动化的API设计/开发/测试工具，开发者通过华为云账号登录后即可使用。 API开放阶段 API开发者（API提供方）可以在API中心申请入驻为服务商，然后自助发布上架API。上架成功后，API

查看更多 →

工具中心 管理用户组 父主题： 普通用户指南

查看更多 →

et。 添加私有工具 您使用的工具如果不在GCS提供的公共工具中（公共工具的范围请参见公共工具的范围），您可以通过添加私有工具，使用自定义工具。 如要使用自有工具镜像，添加私有工具前，您需要前往 容器镜像服务 SWR上传镜像。 登录GCS控制台，选择左侧导航栏的“工具仓库”，在右侧页面单击“添加工具”。

查看更多 →

工具市场 工具市场会按照场景分类展现各功能的工具卡片，目前支持以下类型： 通用场景：脚本管理、文件管理。 云服务场景：启动ECS实例、关闭ECS实例、重启RDS实例、修改ECS非管理员密码、重启CCE工作负载。 软件部署：暂时为空。 日常巡检：暂时为空。 故障处理：清理磁盘空间。

查看更多 →

工具下载 命令行客户端（包含GDS工具包） 表1 gsql下载地址 操作系统类别 适用操作系统版本 下载地址 校验文件 Microsoft Windows Microsoft Windows x86_64： Windows 7及以上。 Windows Server 2008及以上。

查看更多 →

工具对接 JDBC配置 父主题： 开发设计建议

查看更多 →

Edge工具所在主机IP 27080 HTTPS Edge服务监听端口，该端口用于人机交互 否 口令认证 HTTPS Edge工具所在主机 Edge工具所在主机IP NA Edge工具所在主机 Edge工具所在主机IP 5678 TCP Edge服务监听端口，该端口用于采集器与Edge内部交互

查看更多 →

工具对接 JDBC配置 父主题： 开发设计建议

查看更多 →

工具对接 JDBC配置 父主题： 开发设计建议

查看更多 →

工具对接 JDBC配置 父主题： 开发设计建议

查看更多 →

工具类 毕昇编译器 应用加速工具 Pod带宽管理工具 安全加固工具

查看更多 →

数据治理 平台 数据平台总体架构 本项目一期以离线数据分析为主，按照华为云数据使能方案的离线 数据湖 子方案，以华为公有云为载体，为客户建设离线数据湖平台，作为本次项目数据分析应用的数据底座。 离线数据湖平台整体架构如下，核心由三个云服务组成，大数据平台MRS、 数据仓库 平台DWS、数据集成治理平台DataArts

查看更多 →