基于Slurm构建泛HPC场景云上云下资源协同解决方案

登录OBS控制台。 选择“并行文件系统 > 创建并行文件系统”，创建一个名称为wordcount01的文件系统。 wordcount01仅为示例，文件系统名称必须全局唯一，否则会创建并行文件系统失败。 在OBS文件系统列表中单击文件系统名称wordcount01，选择“文件 > 新建文件夹”，分别

查看更多 →

分支名”获取该分支的执行结果。 失败时停止 并行处理出现错误时的是否停止。 True：表示任一并行处理的分支出现错误时，整个任务便停止，并返回错误信息。 False：表示并行处理的分支出现错误后，整个任务会继续执行后续节点。 超时时间(ms) 并行处理过程的最长执行时间，如果超过该时间

查看更多 →

并行查询（PQ） 并行查询简介 注意事项 开启并行查询 验证并行查询效果 父主题： 常见内核功能

查看更多 →

下： 图1 并行查询原理图 应用场景 并行查询适用于大部分SELECT语句，例如大表查询、多表连接查询、计算量较大的查询。对于非常短的查询，效果不太显著。 轻分析类业务 报表查询通常SQL复杂而且比较耗费时间，通过并行查询可以加速单次查询效率。 系统资源相对空闲 并行查询会使用更

查看更多 →

登录OBS控制台。 选择“并行文件系统 > 创建并行文件系统”，创建一个名称为wordcount01的文件系统。 wordcount01仅为示例，文件系统名称必须全局唯一，否则会创建并行文件系统失败。 在OBS文件系统列表中单击文件系统名称wordcount01，选择“文件 > 新建文件夹”，分别

查看更多 →

理操作，如创建桶、上传文件/文件夹、下载文件/文件夹、删除文件/文件夹等。对于熟悉命令行程序的用户，obsutil能在执行批量处理、自动化任务场景能为您带来更优体验。 在OBS服务控制台上创建并行文件系统，具体步骤请参考创建并行文件系统。 针对您的操作系统，下载对应版本的obsu

查看更多 →

完成”，委托成功创建。 为 MRS 集群配置委托 配置存算分离支持在新建集群中配置委托实现，也可以通过为已有集群绑定委托实现。本示例以为已有集群配置委托为例介绍。 登录MRS控制台，在导航栏选择“现有集群”。 单击集群名称，进入集群详情页面。 在集群详情页的“概览”页签，单击“IAM

查看更多 →

sparksql仅为示例，文件系统名称必须全局唯一，否则会创建并行文件系统失败。 单击sparksql文件系统名称，并选择“文件”。 单击“新建文件夹”，创建input文件夹。 进入input文件夹，单击“上传文件 > 添加文件”，选择本地的txt文件，然后单击“上传”。 登录MRS控制台，在左侧导航栏选择“现有集群”，单击集群名称。

查看更多 →

分享文件夹 操作场景 您可以使用文件夹分享功能，将OBS中的整个文件夹分享给所有用户。 背景知识 文件夹分享强调临时性，存在有效期。分享者需要先设置一个6位数的提取码，再创建分享。创建成功后，OBS会自动将文件夹中的所有对象的下载链接汇总到一个静态网站中，并托管到一个公共的OBS

查看更多 →

登录OBS控制台。 单击“并行文件系统 > 创建并行文件系统”，创建一个名称为sparkpi的文件系统。 sparkpi仅为示例，文件系统名称必须全局唯一，否则会创建并行文件系统失败。其他参数分别保持默认值。 单击sparkpi文件系统名称，并选择“文件”。 单击“新建文件夹”，分别创建pr

查看更多 →

文件或文件夹到其他指定路径下。文件或文件夹被移动后，源路径下的文件或文件夹会被删除。详情请参见使用OBS Browser+移动文件或文件夹或移动对象。 此外，您还可以使用 对象存储迁移 服务 OMS 实现OBS桶之间跨账号、跨区域以及同区域内的数据迁移。 OBS工具不支持在不同集群并行文件系统之间移动文件。

查看更多 →

并行文件系统 并行文件系统挂载后，为何显示256T？ 文件列表是否支持排序？

查看更多 →

对象存储服务 ”。 单击“并行文件系统 > 创建并行文件系统”，创建一个名称为“obs-demo-analysis-hwt4”的文件系统。策略等参数保持默认值。 单击文件系统名称。选择左侧导航栏“文件”，在“文件”页签下单击“新建文件夹”，分别新建“program”、“input”文件夹，如图4所示。

查看更多 →

存放的是对象，可以直接存放文件，文件会自动生成对应的系统元数据，用户也可以自定义文件的元数据。 存放的是文件，会以文件和文件夹的层次结构来整理和呈现数据。 主要特点 共享存储，用户态文件系统。 可提供高性能存储服务。 共享存储，用户态文件系统。 用户可根据业务需求配置对应的对象存储类型。 共享存储，可提供高性能、高吞吐存储服务。

查看更多 →

gsql工具包中的文件和文件夹。 表3 Windows gsql工具包目录及文件说明 文件或文件夹 说明 x64 该文件夹中包含了64位Windows gsql执行二进制和动态库。 x86 该文件夹中包含了32位Windows gsql执行二进制和动态库。 在“专属集群”页面的集群列表中，

查看更多 →

。 Local导出模式：将集群中的业务数据导出到集群节点所在主机上。 Remote导出模式：将集群中的业务数据导出到集群之外的主机上。 导出模式 GaussDB 支持的导出模式有Local和Remote模式。 Remote模式：将集群中的业务数据导出到集群之外的主机上。 支持多个G

查看更多 →

如何将组件构建集群由共享构建集群切换为私有构建集群？ 问题描述 ServiceStage提供的共享构建集群为所有用户共用，从安全和资源隔离的角度考虑，并不安全。 建议您在共享构建集群下线前，尽快将共享构建集群上的应用配置到私有构建集群，私有构建集群会提供更加安全可靠的服务。 前置操作

查看更多 →

。 并行文件系统使用方式 并行文件系统提供管理控制台、OBSA以及RESTful API接口的使用方法。用户可以在任何时间和地点对存储在并行文件系统内的文件进行处理，并且可以快速获取到处理后的文件。并行文件系统除支持POSIX文件语义外，也支持原来对象的接口，即用户仍然可以使用对

查看更多 →

分支名”获取该分支的执行结果。 失败时停止 并行处理出现错误时的是否停止。 True：表示任一并行处理的分支出现错误时，整个任务便停止，并返回错误信息。 False：表示并行处理的分支出现错误后，整个任务会继续执行后续节点。 超时时间(ms) 并行处理过程的最长执行时间，如果超过该时间

查看更多 →

共享/停止共享 描述 连接设备后，调用共享接口发起共享或调用停止共享接口停止共享。 业务流程 投屏前需首先获得用户授权屏幕截取权限，调用 confirmPermissionBeforeSharing 接口。 在当前 Activity 中重写 onActivityResult 方法，在此调用投屏接口

查看更多 →

Trash user/hive/.Trash 对应的“.Trash”文件夹若不存在需使用omm用户通过集群客户端手动创建。 例如执行以下命令： hdfs dfs -mkdir -p obs://表所在的OBS并行文件系统名称/文件夹路径 Spark user/omm/.Trash user/root/

查看更多 →