使用Alluxio 配置底层存储系统 通过数据应用访问Alluxio Alluxio常用操作

查看更多 →

数据识别与准备 在迁移开始前，华为云 OMS 服务会先对源端存储系统中的数据进行识别，包括对象大小、最后修改时间以及位置等关键信息。基于这些信息，服务会为用户生成一个对应的迁移任务配置，确保迁移过程的高效性和准确性。 父主题： 迁移工作原理

查看更多 →

云硬盘存储卷概述 为满足数据持久化的需求，CCE支持将云硬盘（EVS）创建的存储卷挂载到容器的某一路径下，当容器迁移时，挂载的云硬盘将一同迁移。通过云硬盘，可以将存储系统的远端文件目录挂载到容器中，数据卷中的数据将被永久保存，即使删除了容器，数据卷中的数据依然保存在存储系统中。 图1 CCE挂载云硬盘存储卷

查看更多 →

数据迁移 根据迁移配置，华为云OMS服务会开始从源端存储系统拉取数据。同时，服务会确保数据的完整性和一致性，避免在迁移过程中出现数据丢失或损坏的情况。服务还支持断点续传功能，当迁移过程中出现网络中断或其他异常情况时，服务可以从断点处恢复传输，确保数据的完整性和迁移的连续性。 父主题：

查看更多 →

HANA备份与恢复 虽然SAP HANA是内存数据库，但所有数据的修改都会被保存在持久存储系统中，因此即使遇到例如突然的停电导致停机，SAP HANA也能够恢复数据并确保数据不丢失。此外，为了在灾难发生后能够恢复数据，我们还必须定期将持久存储系统中的数据和数据库日志备份到远端，例如OBS桶中。关于SAP

查看更多 →

Region个数：XXX 每天新增数据量统计 每天新增数据量主要评估数据增长速度（可以按天/小时等周期维度）。在第一次全量迁移数据后，后续可以定期搬迁老集群新增数据，直到业务完成最终割接。 表5 新增数据量统计 大数据组件 待迁移的数据路径 新增数据量大小 HDFS/OBS（或其他文件存储系统） /user/helloworld

查看更多 →

数据持久度 数据持久度是指数据不丢失的概率，即存储在预计周期内不出现数据丢失的概率，可以用于度量一个存储系统的可靠性。其只表示数据是否丢失的概率，不体现数据丢失多少；数据持久度的预计周期，一般按一年进行预计。 影响存储数据持久度的主要因子有：冗余数、磁盘失效率与数据修复时间。其中

查看更多 →

DES签名文件有什么作用？ 签名文件是服务单中磁盘的唯一标识，需要将其存入磁盘或Teleport存储系统的根目录。华为数据中心管理员收到磁盘或Teleport设备，并完成挂载或连线配置后，系统会根据签名文件自动匹配存储设备与服务单，避免人工干预带来的误操作。 父主题： 服务安全类

查看更多 →

Studio基于数据湖底座，提供一站式数据开发、治理和服务等能力。 数据集成的数据连接仅限于在数据集成中使用，用于将源端原始数据集成到目的端数据湖底座中，数据集成支持的数据源请参见数据集成支持的数据源。 表1 DataArts Studio 支持的数据源 数据源类型 管理中心 数据架构 数据开发

查看更多 →

为什么存储迁移工作流进度长时间没有变化？ 将HTTP/HTTPS数据源迁移到OBS时，如果存在URL不同但对象名称相同的情况，会如何处理？ OBS迁移到NAS，如果源端存在同名但大小写不同的对象，会如何处理？ 关于OBS、NAS和SMB存储系统之间进行异构迁移的对象长度限制说明

查看更多 →

HBase表中的单行记录 操作场景 由于底层存储系统的原因，Hive并不能支持对单条表数据进行删除操作，但在Hive on HBase功能中， MRS Hive提供了对HBase表的单条数据的删除功能，通过特定的语法，Hive可以将自己的HBase表中符合条件的一条或者多条数据清除。 表1 删除Hive

查看更多 →

384 DDR4 RAM (GB) 无 2 x 2*10GE + SDI卡 本地存储型 系统盘和数据盘均使用本地磁盘，针对数据量大，对计算性能、稳定性、实时性等要求很高的业务场景，如大数据、分布式缓存等。 表2 本地存储型规格详情 规格名称/ID CPU 内存 本地磁盘 扩展配置 physical

查看更多 →

Profile和个人用户数据存储 若用户需保存个人数据，必须配置Profile和个人用户数据存储。在没有配置Profile和个人用户数据存储的场景下，建议不要在APS 服务器 中保存个人数据，避免个人信息被其他用户访问，导致信息泄露。 远程应用的用户Profile数据存储使用Window

查看更多 →

发。 适用以下场景： 数据处理（Data Processing）：可以用来快速处理数据，兼具容错性和可扩展性。 迭代计算（Iterative Computation）：支持迭代计算，有效应对多步的数据处理逻辑。 数据挖掘（Data Mining）：在海量数据基础上进行复杂的挖掘分析，可支持各种数据挖掘和机器学习算法。

查看更多 →

发。 适用以下场景： 数据处理（Data Processing）：可以用来快速处理数据，兼具容错性和可扩展性。 迭代计算（Iterative Computation）：支持迭代计算，有效应对多步的数据处理逻辑。 数据挖掘（Data Mining）：在海量数据基础上进行复杂的挖掘分析，可支持各种数据挖掘和机器学习算法。

查看更多 →

Distributed File System），提供高吞吐量的数据访问，适合大规模数据集方面的应用。 Hive 建立在Hadoop基础上的开源的数据仓库，提供类似SQL的Hive Query Language语言操作结构化数据存储服务和基本的数据分析服务。 ZooKeeper 提供分布式、高可

查看更多 →

B级别的数据存储和毫秒级的数据详单查询。 图2 车联网行业海量数据存储场景 该场景下MRS的优势如下所示。 实时：利用Kafka实现海量汽车的消息实时接入。 海量数据存储：利用HBase实现海量数据存储，并实现毫秒级数据查询。 分布式数据查询：利用Spark实现海量数据的分析查询。

查看更多 →

发。 适用以下场景： 数据处理（Data Processing）：可以用来快速处理数据，兼具容错性和可扩展性。 迭代计算（Iterative Computation）：支持迭代计算，有效应对多步的数据处理逻辑。 数据挖掘（Data Mining）：在海量数据基础上进行复杂的挖掘分析，可支持各种数据挖掘和机器学习算法。

查看更多 →

Alluxio Alluxio是一个面向基于云的数据分析和人工智能的数据编排技术。在MRS的大数据生态系统中，Alluxio位于计算和存储之间，为包括Apache Spark、Presto、Mapreduce和Apache Hive的计算框架提供了数据抽象层，使上层的计算应用可以通过统一的

查看更多 →

建节点界面查看您需要的节点规格是否支持。 容器底层文件存储系统说明 Docker 1.15.6及之前集群版本Docker底层文件存储系统采用xfs格式。 1.15.11及之后版本集群新建节点或重置后Docker底层文件存储系统全部采用ext4格式。 对于之前使用xfs格式容器应用

查看更多 →

HBase表中的单行记录 操作场景 由于底层存储系统的原因，Hive并不能支持对单条表数据进行删除操作，但在Hive on HBase功能中，MRS Hive提供了对HBase表的单条数据的删除功能，通过特定的语法，Hive可以将自己的HBase表中符合条件的一条或者多条数据清除。 表1 删除Hive

查看更多 →