创建文件系统异步任务 功能介绍 创建文件系统异步任务，仅支持异步查询目录资源使用情况，API请求路径的feature取值为dir-usage，以下简称为DU任务。 接口约束 在2023年8月1号之后创建的文件系统支持该API操作。如果存在10个正在执行的任务，则不允许创建新任务。

查看更多 →

前，您需要先创建一个专属资源池，操作指导请参考创建专属资源池。 创建一个专属资源池前需要先创建网络，创建网络指导可参考创建网络。 购买Notebook存储 使用Notebook代码调试时，需要创建Notebook实例，如果创建时选择“云硬盘EVS”作为存储位置，会创建云硬盘EVS。

查看更多 →

OBS支持的region以及region与endPoint的对应关系，详细信息请参见地区与终端节点。 目前接口仅在并行文件系统支持，普通对象并行文件系统不支持，如何创建并行文件系统请参考创建并行文件系统(Java SDK)。 方法定义 obsClient.modifyObject(ModifyObjectRequest

查看更多 →

OBS支持的region以及region与endPoint的对应关系，详细信息请参见地区与终端节点。 目前接口仅在并行文件系统支持，普通对象并行文件系统不支持，如何创建并行文件系统请参考创建并行文件系统(Java SDK)。 方法定义 obsClient.renameObject(RenameObjectRequest

查看更多 →

在弹出的“基本信息”界面中查看桶的基本信息，如图1所示。 图1 桶的基本信息 表1 参数说明 参数 说明 桶名称 桶的名称 桶类型 对象存储 还是 并行文件系统。 区域 桶所在的区域。 存储类别 桶的存储类别，有标准存储、低频访问存储、归档存储三种类别。 桶版本号 桶的版本号。 存储用量

查看更多 →

云服务商对象存储服务中的数据在线迁移至华为云的对象存储服务（Object Storage Service，OBS）中，也可以在对象存储服务OBS之间进行灵活的数据迁移。 使用对象存储迁移服务，您只需在控制台填写源端OBS数据信息和目的端OBS数据信息，并创建迁移任务或创建迁移任务

查看更多 →

Filesystem nodePublishSecretRef为对象存储卷挂载使用的访问密钥（AK/SK），您需要使用AK/SK创建一个Secret，在创建PV时使用。详细说明请参见对象存储卷挂载设置自定义访问密钥（AK/SK）。 创建PVC。 apiVersion: v1 kind: P

查看更多 →

-bucket”）。 同一用户在同一个区域多次创建同名并行文件系统不会报错，创建的并行文件系统属性以第一次请求为准。 默认取值： 无 Key string 必选 参数解释： 目录名。目录名是并行文件系统中目录的路径，路径中不包含并行文件系统名。 例如，您对象的访问地址为examplebucket

查看更多 →

FileSytem结果表 功能描述 FileSystem结果表用于将数据输出到分布式文件系统HDFS或者对象存储服务OBS等文件系统。数据生成后，可直接对生成的目录创建非 DLI 表，通过DLI SQL进行下一步处理分析，并且输出数据目录支持分区表结构。适用于数据转储、大数据分析、备份或活跃归档、深度或冷归档等场景。

查看更多 →

专属对象存储 专属对象存储是专属云资源下的对象存储服务。对象存储服务可以申请独享的专属物理主机资源，从而满足您对隔离性、安全性、性能的更高要求。 图1 专属对象存储 购买专属对象存储 专属云的申请和开通是线下进行的，开通专属云后才能购买专属对象存储，购买方法请参见如何购买专属对象存储。 对象

查看更多 →

省成本。 目前，导入数据有两种方式： 方式一：无需用户创建server，使用默认server创建外表，支持TXT、 CS V格式的数据，参见从OBS导入CSV、TXT数据。 方式二：需用户创建server，使用该server创建外表，支持ORC、CARBONDATA、TXT、CSV、

查看更多 →

FileSytem结果表 功能描述 FileSystem结果表用于将数据输出到分布式文件系统HDFS或者对象存储服务OBS等文件系统。数据生成后，可直接对生成的目录创建非DLI表，通过DLI SQL进行下一步处理分析，并且输出数据目录支持分区表结构。适用于数据转储、大数据分析、备份或活跃归档、深度或冷归档等场景。

查看更多 →

Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。您可以指定SFS Turbo内的目录与OBS对象存储桶进行关联，然后通过创建导入导出任务实现数据同步。您可以在上层训练等任务开始前将OBS对象存储桶中的数据提前导入到SFS

查看更多 →

在HDFS命令行显式添加要访问的OBS文件系统。 例如： 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径 使用以下命令创建OBS文件系统下的目录： hdfs dfs -mkdir obs://OBS并行文件系统名称/hadoop 使用以下命令上传客户端节点“/opt/test

查看更多 →

迁移并行文件系统内的对象数据有哪些限制？ 当待迁移对象所属文件层级过深时，建议通过创建迁移任务组进行迁移。如果通过创建迁移任务进行迁移，可能出现列举对象超时，导致列举中断。 父主题： 迁移限制

查看更多 →

NULL - bucket_type 创桶时，指定是对象桶还是并行文件系统 对象桶：OBS_BUCKET_OBJECT - bucket_list_type 列举桶时，确定列举桶的类型：所有桶、对象桶、并行文件系统 所有桶：OBS_BUCKET_LIST_ALL - 表2 obs_options

查看更多 →

拖拽上传 OBS Browser+提供强大的拖拽上传功能，您可以将本地的一个或多个文件或者文件夹拖拽到对象存储的对象列表或者并行文件系统的对象列表中；同时您也可以将文件或文件夹拖拽到指定的目录上，这样可以上传到指定的目录中。拖拽上传可以轻松便捷地帮你把本地文件上传到OBS中。 父主题：

查看更多 →

xml配置文件，查找相关参数。 vim hive-site.xml catalog中的obs指的是obs桶，不是obs并行文件系统，目前还不支持obs并行文件系统。 父主题： 创建 MRS Hive连接

查看更多 →

异常恢复 评估后创建迁移任务失败怎么办？ 源端对象存储访问频率过高导致迁移失败怎么办？ 迁移任务执行失败怎么办？ 迁移任务组执行失败怎么处理？ SMN消息通知功能无法正常使用怎么办？ 如何解决KMS状态错误导致的迁移任务失败？ 迁移失败后提示“无法读取归档类型数据，请解冻数据后进行迁移”该如何处理？

查看更多 →

计费FAQ 基础知识相关 如何购买对象存储服务？ 如何购买专属对象存储？ 资源包相关 配置CDN回源，并购买回源流量包，计费未走回源流量包 已购买资源包，为什么仍然产生按需计费？ 标准存储包（多AZ存储）的作用是什么？ 购买了回源流量包是否还需要购买公网流出流量包？ 资源包是否必须购买？是否能指定给具体的桶使用？

查看更多 →

在Yarn命令行显式添加要访问的OBS文件系统。 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径 使用以下命令创建OBS文件系统下的目录： hdfs dfs -mkdir obs://OBS并行文件系统名称/hadoop1 执行以下Yarn任务访问OBS：

查看更多 →