取消挂载并行文件系统 如果不再需要通过挂载方式访问OBS并行文件系统，或者需要对已挂载并行文件系统进行参数新增、修改或删除时，可以取消挂载并行文件系统。 取消挂载并行文件系统不会影响已保存至并行文件系统中的数据。 前提条件 待取消挂载的并行文件系统目前处于挂载状态。 操作步骤 打开命令行终端。

查看更多 →

指定扫描并行度的Hint 功能描述 在并行的执行计划中，指定表扫描的并行度。 语法格式 scandop([@queryblock] table dop_num) 参数说明 @queryblock请参见指定Hint所处于的查询块Queryblock，可省略，表示在当前查询块生效。

查看更多 →

为什么并行度大于待处理的block数目时，CarbonData仍需要额外的executor？ 问题 为什么并行度大于待处理的block数目时，CarbonData仍需要额外的executor？ 回答 CarbonData块分布对于数据处理进行了如下优化： 优化数据处理并行度。 优化了读取块数据的并行性。

查看更多 →

为什么并行度大于待处理的block数目时，CarbonData仍需要额外的executor？ 问题 为什么并行度大于待处理的block数目时，CarbonData仍需要额外的executor？ 回答 CarbonData块分布对于数据处理进行了如下优化： 优化数据处理并行度。 优化了读取块数据的并行性。

查看更多 →

全并行的数据查询处理 功能描述 全并行的分布式查询处理是DWS中最核心的技术，它可以最大限度的降低查询时节点之间的数据流动，以提升查询效率。 DWS为达成高性能数据分析目标，实现了一套高性能的分布式执行引擎，执行引擎以SQL引擎生成的执行计划为输入，将元组按执行计划的要求进行加工并将结果返回给客户端。

查看更多 →

指定扫描并行度的Hint 功能描述 在并行的执行计划中，指定表扫描的并行度。 语法格式 scandop([@queryblock] table dop_num) 参数说明 @queryblock请参见指定Hint所处的查询块Queryblock，可省略，表示在当前查询块生效。 t

查看更多 →

并行文件系统约束限制 操作限制 不支持将已有的OBS桶修改为并行文件系统，创建并行文件系统方法请参见创建并行文件系统。 不支持控制台设置并行文件系统的自定义 域名 ，API设置方法参见设置自定义域名。 功能限制 暂不支持通过图片处理特性对存放在并行文件系统中的图片进行瘦身、缩放、添加水印等操作。

查看更多 →

挂载并行文件系统失败 本文根据在挂载并行文件系统时遇到的不同现象，总结了常见挂载并行文件系统失败的可能原因及解决办法。 现象一：挂载并行文件系统时出现“The specified bucket does not exist”类似错误 问题定位： 待挂载并行文件系统不存在。 解决办法：

查看更多 →

单机多卡数据并行-DataParallel(DP) 本章节介绍基于PyTorch引擎的单机多卡数据并行训练。 MindSpore引擎的分布式训练参见MindSpore官网。 训练流程简述 单机多卡数据并行训练流程介绍如下： 将模型复制到多个GPU上 将一个Batch的数据均分到每一个GPU上

查看更多 →

动态挂载OBS并行文件系统 什么是动态挂载OBS并行文件系统 并行文件系统（Parallel File System）是 对象存储服务 （Object Storage Service，OBS）提供的一种经过优化的高性能文件系统，详细介绍可以参见并行文件系统。 在ModelArts运行

查看更多 →

调整并行文件系统配额 文件系统创建成功后，支持对已配置的容量配额进行调整。调整后，带宽上限和费用也会随之变化。 操作步骤 在管理控制台首页，选择“服务列表 > 存储 > 对象存储服务”。 选择左侧导航栏的“并行文件系统”，进入并行文件系统控制台。 在需要调整的并行文件系统所在行的右侧，单击“调整配额”。

查看更多 →

通过并行SCAN提升全库扫描速度 当实例中的key数量较多时，传统的SCAN命令扫描耗时久，开源Redis较难解决该痛点问题。GeminiDB Redis基于分布式架构，支持用户同时对多个数据分区进行并行扫描，达到并行提速效果。 注意事项 该方案仅适用于GeminiDB Redis集群版实例。

查看更多 →

配置了云存储配置后，为什么实例异常了？ 当配置云存储的并行文件系统时，如果选择的并行文件系统中的并没有创建相应的子路径，则实例会为异常。 示例： 图1 挂载信息 图2 相应的并行文件系统中并没有test文件夹或文件 图3 报错事件 解决方法 登录OBS控制台。 选择“并行文件系统”，单击

查看更多 →

取消挂载并行文件系统失败 本文根据在取消挂载并行文件系统时遇到的不同现象，总结了常见取消挂载并行文件系统失败的可能原因及解决办法。 现象一：取消挂载并行文件系统时出现“target is busy”类似错误 问题定位： 取消挂载时，命令行终端停留在挂载目录或其子目录。 解决办法：

查看更多 →

并行文件系统是否支持资源包？ 当前如下资源包同时支持并行文件系统及对象桶： 标准存储资源包：包括单AZ及多AZ 归档存储资源包 公网流出流量包 由于并行文件系统暂时不支持跨区域复制和回源功能，所以无法使用对应的跨区域复制流量包和回源流量包。 父主题： 计费相关

查看更多 →

为什么有时访问没有权限的parquet表时，在上报“Missing Privileges”错误提示之前，会运行一个Job？ 问题 为什么有时访问没有权限的parquet表时，在上报“Missing Privileges”错误提示之前，会运行一个Job？ 回答 Spark SQL对

查看更多 →

executor内存不足导致查询性能下降 为什么数据查询/加载失败，且发生“org.apache.carbondata.core.memory.MemoryException: Not enough memory”异常？ 当初始Executor为0时，为什么INSERT INTO/LOAD

查看更多 →

python通过thrift访问cloudtable，多个任务并行缓慢 问题现象 访问CloudTable HBase数据表，多个任务并行缓慢。 分析原因 集群节点存在GC内存泄漏，需要对节点进行灰度重启。 另外分析问题是否存在负载过高的问题，联系相关工作人员处理。 解决办法 重

查看更多 →

创建并行文件系统(Go SDK) 功能介绍 OBS并行文件系统是对象的容器，您上传的文件都将以对象的形式存放在并行文件系统中。本文介绍如何使用GO SDK创建并行文件系统。 调用创建并行文件系统接口，将在当前账号按照用户指定的并行文件系统名创建一个新并行文件系统，接口支持根据用户

查看更多 →

管理并行文件系统(Java SDK) 创建并行文件系统(Java SDK) 列举并行文件系统(Java SDK) 列举并行文件系统内对象(Java SDK) 修改写对象(Java SDK) 重命名对象(Java SDK) 截断对象(Java SDK)

查看更多 →

用户可以通过以下几种方式使用并行文件系统。 OBS桶的权限管理规则及权限要求同样适用于并行文件系统，用户在使用并行文件系统前需要确保具备OBS资源的访问权限。 表1 使用方式 方式 主要功能 相关链接 并行文件系统控制台 您可以在控制台创建并行文件系统，并进行查看、管理等基本操作。 创建并行文件系统

查看更多 →