通过外表并行导入 关于并行导入 教程和最佳实践 准备源数据 安装配置和启动GDS 创建GDS外表 执行导入数据 处理错误表 停止GDS 示例 父主题： 导入数据

查看更多 →

使用外表并行导出 关于并行导出 规划导出数据 安装配置和启动GDS 创建GDS外表 执行导出数据 停止GDS 示例 父主题： 导出数据

查看更多 →

并行文件系统 并行文件系统概述 并行文件系统支持的特性 并行文件系统约束限制 调整并行文件系统配额 创建并行文件系统

查看更多 →

并行处理算子 并行处理算子可以同时执行多个分支逻辑，分支间互不影响。 表1 并行处理算子 参数 说明 失败策略 当并行分支中存在失败情况时，配置API工作流的失败策略。 任一分支失败则终止：表示当并行分支中存在失败情况时，则此API工作流置为失败状态，不再继续执行。 分支失败继续

查看更多 →

从OBS并行导入数据 关于OBS并行导入 从OBS导入 CS V、TXT数据 从OBS导入ORC、CARBONDATA数据 父主题： 导入数据

查看更多 →

并行文件系统 并行文件系统挂载后为何显示256T 文件列表是否支持排序？

查看更多 →

个节点。增加任务的并行度，充分利用集群机器的计算能力，一般并行度设置为集群CPU总和的2-3倍。 操作步骤 并行度可以通过如下三种方式来设置，用户可以根据实际的内存、CPU、数据以及应用程序逻辑的情况调整并行度参数。 在会产生shuffle的操作函数内设置并行度参数，优先级最高。

查看更多 →

。 并行文件系统使用方式 并行文件系统提供管理控制台、OBSA以及RESTful API接口的使用方法。用户可以在任何时间和地点对存储在并行文件系统内的文件进行处理，并且可以快速获取到处理后的文件。并行文件系统除支持POSIX文件语义外，也支持原来对象的接口，即用户仍然可以使用对

查看更多 →

在各个节点。增加任务的并行度，充分利用集群机器的计算能力。 操作步骤 任务的并行度可以通过以下四种层次（按优先级从高到低排列）指定，用户可以根据实际的内存、CPU、数据以及应用程序逻辑的情况调整并行度参数。 算子层次 一个算子、数据源和sink的并行度可以通过调用setParallelism()方法来指定，例如

查看更多 →

创建并行文件系统 用户可以通过控制台创建并行文件系统。 操作步骤 在管理控制台首页，选择“服务列表 > 存储 > 对象存储服务 ”。 选择左侧导航栏的“并行文件系统”，进入并行文件系统控制台。 单击界面右上角的“创建并行文件系统”，进入创建页面。 图1 创建并行文件系统 (可选）复制并行文件系统配置。

查看更多 →

单击“云存储配置”模块中的“编辑”，进入云存储配置页面。 单击选择“配置并行文件系统”。 图2 配置并行文件系统 从下拉框中选择已授权的并行文件系统名称。 如需新增授权，可以单击下拉框右侧“去授权并行文件系统”进行添加，具体操作请参考授权并行文件系统。 参考表1配置容器挂载的路径和权限。 表1 参数说明

查看更多 →

nux重启后，都需要重新挂载。 并行文件系统的容量请以实际使用情况为准。 您也可以设置开机自动挂载并行文件系统，具体操作请参见开机自动挂载并行文件系统。 一个并行文件系统支持挂载到多台 云服务器 ，但数据一致性需由您自行维护，避免出现多台云 服务器 同时对一个文件并发写入的情况。 桶级的

查看更多 →

在各个节点。增加任务的并行度，充分利用集群机器的计算能力。 操作步骤 任务的并行度可以通过以下四种层次（按优先级从高到低排列）指定，用户可以根据实际的内存、CPU、数据以及应用程序逻辑的情况调整并行度参数。 算子层次 一个算子、数据源和sink的并行度可以通过调用setParallelism()方法来指定，例如

查看更多 →

取消挂载并行文件系统 如果不再需要通过挂载方式访问OBS并行文件系统，或者需要对已挂载并行文件系统进行参数新增、修改或删除时，可以取消挂载并行文件系统。 取消挂载并行文件系统不会影响已保存至并行文件系统中的数据。 前提条件 待取消挂载的并行文件系统目前处于挂载状态。 操作步骤 打开命令行终端。

查看更多 →

1/2) 2 | -> Seq Scan on cst1 (2 rows) 可以在并行计划中，使用scandop hint可以成功指定扫描并行度。 只有当dop_num和当前并行度（query_dop）一致或为1时，hint才会生效。 gaussdb=# EXPLAIN

查看更多 →

全并行的数据查询处理 功能描述 全并行的分布式查询处理是DWS中最核心的技术，它可以最大限度的降低查询时节点之间的数据流动，以提升查询效率。 DWS为达成高性能数据分析目标，实现了一套高性能的分布式执行引擎，执行引擎以SQL引擎生成的执行计划为输入，将元组按执行计划的要求进行加工并将结果返回给客户端。

查看更多 →

1/2) 3 | -> Seq Scan on cst1 (3 rows) 可以在并行计划中，使用scandop hint可以成功指定扫描并行度。 只有当dop_num和当前并行度（query_dop）一致或为1时，hint才会生效。 gaussdb=# EXPLAIN

查看更多 →

并行文件系统约束限制 操作限制 不支持将已有的OBS桶修改为并行文件系统，创建并行文件系统方法请参见创建并行文件系统。 不支持控制台设置并行文件系统的自定义 域名 ，API设置方法参见设置自定义域名。 功能限制 暂不支持通过图片处理特性对存放在并行文件系统中的图片进行瘦身、缩放、添加水印等操作。

查看更多 →

挂载并行文件系统失败 本文根据在挂载并行文件系统时遇到的不同现象，总结了常见挂载并行文件系统失败的可能原因及解决办法。 现象一：挂载并行文件系统时出现“The specified bucket does not exist”类似错误 问题定位： 待挂载并行文件系统不存在。 解决办法：

查看更多 →

单机多卡数据并行-DataParallel(DP) 本章节介绍基于PyTorch引擎的单机多卡数据并行训练。 MindSpore引擎的分布式训练参见MindSpore官网。 训练流程简述 单机多卡数据并行训练流程介绍如下： 将模型复制到多个GPU上 将一个Batch的数据均分到每一个GPU上

查看更多 →

动态挂载OBS并行文件系统 什么是动态挂载OBS并行文件系统 并行文件系统（Parallel File System）是对象存储服务（Object Storage Service，OBS）提供的一种经过优化的高性能文件系统，详细介绍可以参见并行文件系统。 在ModelArts运行

查看更多 →