基于Slurm构建泛HPC场景云上云下资源协同解决方案

是 String 文件夹名称 最小长度：1 最大长度：2000 parent_folder 否 String 所在文件夹 最小长度：0 最大长度：2000 响应参数 状态码： 201 表4 响应Body参数 参数 参数类型 描述 id String 创建文件夹返回体 请求示例 创

查看更多 →

测试文件夹管理 单击测试用例的任意文件夹，可以查看文件夹下面的全部测试用例。 单击用例操作列的，可快捷执行测试用例。 单击用例操作列的，可快捷查看测试用例执行历史。 单击用例操作列的，可单击“复制”或“删除”测试用例。 全选测试用例，单击“删除”，可批量删除测试用例。 父主题： 测试用例管理

查看更多 →

新建文件夹 如果您需要归档整理云端数据，可以选择新建文件夹。创建文件夹后，您可以在新建的文件夹中上传数据；也可以在进行在线仿真处理时，选择所创建的文件夹作为仿真结果的输出目录。 前提条件 已成功从角色桌面进入SIM Space平台，且拥有以下权限之一： 系统预置角色：仿真工程师。

查看更多 →

约束 描述 bucket 在指定的桶内创建文件夹时必选 桶名。 folder 在指定的桶内创建文件夹时必选 桶内的文件夹路径，支持多级文件夹，以“/”分隔。 folder_url 在本地文件系统路径中创建文件夹时必选 本地文件系统中的文件夹路径，支持绝对路径和相对路径。 config

查看更多 →

约束 描述 bucket 在指定的桶内创建文件夹时必选 桶名。 folder 在指定的桶内创建文件夹时必选 桶内的文件夹路径，支持多级文件夹，以“/”分隔。 folder_url 在本地文件系统路径中创建文件夹时必选 本地文件系统中的文件夹路径，支持绝对路径和相对路径。 config

查看更多 →

创建并行文件系统”。 填写文件系统名称，例如“mrs-demo01”。 其他参数请根据需要填写。 图5 创建并行文件系统 单击“立即创建”。 在OBS控制台并行文件系统列表中，单击文件系统名称进入详情页面。 在左侧导航栏选择“文件”，新建program、input文件夹。 program：请上传程序包到该文件夹。

查看更多 →

如何将组件构建集群由共享构建集群切换为私有构建集群？ 问题描述 ServiceStage提供的共享构建集群为所有用户共用，从安全和资源隔离的角度考虑，并不安全。 建议您在共享构建集群下线前，尽快将共享构建集群上的应用配置到私有构建集群，私有构建集群会提供更加安全可靠的服务。 前置操作

查看更多 →

Trash user/hive/.Trash 对应的“.Trash”文件夹若不存在需使用omm用户通过集群客户端手动创建。 例如执行以下命令： hdfs dfs -mkdir -p obs://表所在的OBS并行文件系统名称/文件夹路径 Spark user/omm/.Trash user/root/

查看更多 →

使用Windows系统挂载文件系统时提示不能访问此共享文件夹 现象描述 使用Windows系统挂载文件系统时，提示：“你不能访问此共享文件夹，因为你组织的安全策略阻止未经身份验证的来宾访问。这些策略可帮助你保护你的电脑免受网络上不安全设备或恶意设备的威胁。” 可能原因 由于Win

查看更多 →

x重启后，都需要重新挂载。 并行文件系统的容量请以实际使用情况为准。 您也可以设置开机自动挂载并行文件系统，具体操作请参见开机自动挂载并行文件系统。 一个并行文件系统支持挂载到多台 云服务器 ，但数据一致性需由您自行维护，避免出现多台云 服务器 同时对一个文件并发写入的情况。 桶级的桶策

查看更多 →

gsql工具包中的文件和文件夹。 表3 Windows gsql工具包目录及文件说明 文件或文件夹 说明 x64 该文件夹中包含了64位Windows gsql执行二进制和动态库。 x86 该文件夹中包含了32位Windows gsql执行二进制和动态库。 在“集群管理”页面的集群列表中，

查看更多 →

行绑定。 图3 绑定委托 创建OBS文件系统用于存放数据 大数据存算分离场景，请务必使用OBS并行文件系统（并行文件系统），使用普通对象桶会对集群性能产生较大影响。 登录OBS控制台。 选择“并行文件系统 > 创建并行文件系统”。 填写文件系统名称，例如“mrs-word001”。

查看更多 →

SMP并行执行 在复杂查询场景中，单个查询的执行较长，系统并发度低，通过SMP并行执行技术实现算子级的并行，能够有效减少查询执行时间，提升查询性能及资源利用率。 通过算子并行来提升性能，同时会占用更多的系统资源，包括CPU、内存、网络、I/O等等。本质上SMP是一种以资源换取时间

查看更多 →

验证并行查询效果 本章节使用TPCH测试工具测试并行查询对22条QUERY的性能提升情况。 测试的实例信息如下： 实例规格：32 vCPUs | 256 GB 内核版本：2.0.26.1 并行线程数：16 测试数据量：100GB 操作步骤 生成测试数据。 请在https://github

查看更多 →

其中DN0和DN1上分配了两个文件，其他DN分配了1个文件。 如果OBS上文件大小都相同时，OBS上的文件数与DN节点数的比例为1:1时导入性能为最好，因为每个DN分配的任务都相同。因此建议将数据文件存储到OBS前，尽可能均匀地将文件切分成多个，文件的数量以DN的整数倍更适合。 图1

查看更多 →

量和对象/文件数量没有限制。 对象：是存储在OBS中的基本数据单位。用户上传的数据以对象的形式存储在OBS的桶中。对象的属性包括名称Key，Metadata，Data。 通常，将对象等同于文件来进行管理，但是由于OBS是一种 对象存储服务 ，并没有文件系统中的文件和文件夹概念。为了使

查看更多 →

取消挂载并行文件系统 如果不再需要通过挂载方式访问OBS并行文件系统，或者需要对已挂载并行文件系统进行参数新增、修改或删除时，可以取消挂载并行文件系统。 取消挂载并行文件系统不会影响已保存至并行文件系统中的数据。 前提条件 待取消挂载的并行文件系统目前处于挂载状态。 操作步骤 打开命令行终端。

查看更多 →

Browser。 单击待上传文件或文件夹的桶。 单击“上传”，系统弹出“上传对象”对话框，如图1所示。 您可以选择文件上传，详见4；也可以选择文件夹上传，详见5。 图1 上传对象 单击“选择文件”，打开本地浏览框。选择待上传文件后，单击“打开”。 您最多可同时选择500个文件或文件夹进行上传。

查看更多 →

移动文件或文件夹 移动文件或文件夹的实现方式：复制文件或文件夹到指定位置，然后删除原有文件或文件夹。 批量移动文件数量超过万级别时，建议使用obsutil工具，详见复制对象和删除对象。 前提条件 用户需要有待操作文件的ACL读写权限。 操作步骤 登录OBS Browser。 选中待配置的桶，进入桶界面。

查看更多 →

搜索文件或文件夹 OBS Browser支持按前缀搜索文件或文件夹。 操作步骤 登录OBS Browser。 单击目标文件或文件夹所在的桶。 单击。 父主题： 对象管理

查看更多 →

删除文件或文件夹 用户可根据需要删除已有文件或文件夹。 背景知识 删除文件夹时，文件夹内的文件也将同时被删除，请务必确认这些文件可以被删除。 删除无用的文件或文件夹可节省空间和成本。 用户上传到OBS的某些文件，可能需要定期删除，对于这类删除文件的场景，可通过OBS的生命周期管理

查看更多 →