弹性文件服务 SFS 

 

提供按需扩展的高性能文件存储(NAS),可为云上多个弹性云服务器(Elastic Cloud Server,ECS),容器(CCE&CCI),裸金属服务器(BMS)提供共享访问。

 
 
 

    并行文件系统 更多内容
  • Yarn组件对接OBS

    在Yarn命令行显式添加要访问的OBS文件系统。 使用以下命令访问OBS文件系统。 hdfs dfs -ls obs://OBS并行文件系统名称/路径 使用以下命令创建OBS文件系统下的目录: hdfs dfs -mkdir obs://OBS并行文件系统名称/hadoop1 执行以下Yarn任务访问OBS:

    来自:帮助中心

    查看更多 →

  • 工程配置

    工程配置”页面配置 DLI 作业桶。 配置前,请先购买OBS桶或并行文件系统。大数据场景推荐使用并行文件系统并行文件系统(Parallel File System)是 对象存储服务 (Object Storage Service,OBS)提供的一种经过优化的高性能文件系统,提供毫秒级别访问时延,以及TB/s级

    来自:帮助中心

    查看更多 →

  • 操作指南

    操作指南 挂载并行文件系统 取消挂载并行文件系统

    来自:帮助中心

    查看更多 →

  • 我可以修改对象名称吗?

    在对象列表中,单击需要重命名对象操作列的。 单击“重命名”。 图1 重名对象 在弹出窗口中输入新的对象名,单击“确定”。 重命名并行文件系统中文件 您可以通过API、SDK、OBS Browser+三种方式对重命名并行文件系统中文件。 通过API重命名对象 重命名对象Java SDK 使用OBS Browser+: 登录OBS

    来自:帮助中心

    查看更多 →

  • 异常处理

    异常处理 挂载并行文件系统失败 取消挂载并行文件系统失败

    来自:帮助中心

    查看更多 →

  • Flink对接OBS文件系统

    -input obs://并行文件系统名称/tmp/flinkjob/test -output obs://并行文件系统名称/tmp/flinkjob/output 由于Flink作业是On Yarn运行,在配置Flink对接OBS文件系统之前需要确保Yarn对接OBS文件系统功能是正常的。

    来自:帮助中心

    查看更多 →

  • 云存储说明

    云存储说明 CAE支持对并行文件系统、存储桶和通用文件系统三种类型的云存储,每种云存储的主要特点及应用场景参考表1。 表1 云存储对比 对比维度 对象存储OBS -并行文件系统 对象存储OBS-存储桶 通用文件系统 概念 并行文件系统是OBS提供的一种经过优化的高性能文件系统,提供毫秒级别访

    来自:帮助中心

    查看更多 →

  • Flume对接OBS文件系统

    创建OBS文件系统用于存放数据。 登录OBS控制台。 单击“并行文件系统”进入并行文件系统页面,单击“创建并行文件系统”。 填写文件系统名称,例如“esdk-c-test-pfs1”,其他参数请根据需要填写。单击“立即创建”等待创建完成。 在OBS控制台并行文件系统列表中,单击已新建的文件系统名称进入详情页面。

    来自:帮助中心

    查看更多 →

  • Tensorboard的使用

    的Summary文件先上传到OBS并行文件系统,并确保OBS并行文件系统与ModelArts在同一区域。在Notebook中启动TensorBoard时,Notebook会自动从挂载的OBS并行文件系统目录中读取Summary数据。 Step3 启动TensorBoard 在开发

    来自:帮助中心

    查看更多 →

  • TensorBoard可视化作业

    的Summary文件先上传到OBS并行文件系统,并确保OBS并行文件系统与ModelArts在同一区域。在Notebook中启动TensorBoard时,Notebook会自动从挂载的OBS并行文件系统目录中读取Summary数据。 Step3 启动TensorBoard 在开发

    来自:帮助中心

    查看更多 →

  • Flink组件对接OBS

    -input obs://并行文件系统名称/tmp/flinkjob/test -output obs://并行文件系统名称/tmp/flinkjob/output 由于Flink作业是On Yarn运行,在配置Flink对接OBS文件系统之前需要确保Yarn对接OBS文件系统功能是正常的。

    来自:帮助中心

    查看更多 →

  • 概述

    件托管场景。用户可以将业务代码部分制作镜像后部署到CAE,静态文件部分存储到与该组件关联的并行文件系统中,即可实现混合业务和静态文件的前端组件托管。组件部署后,用户可以通过更新并行文件系统中的静态页面文件来实现实时更新前台应用。 此方案使用的Nginx版本为“alpine-perl”,此版本已在开源镜像提供。

    来自:帮助中心

    查看更多 →

  • 如何准备MRS的数据源?

    在OBS上创建userdata并行文件系统,然后在userdata文件系统下创建program、input、output和log文件夹。 单击“并行文件系统 > 创建并行文件系统”,创建一个名称为userdata的文件系统。 在OBS文件系统列表中单击文件系统名称userdata,选择“文件

    来自:帮助中心

    查看更多 →

  • MindInsight可视化作业

    的Summary文件先上传到OBS并行文件系统,并确保OBS并行文件系统与ModelArts在同一区域。在Notebook中启动MindInsight时,Notebook会自动从挂载的OBS并行文件系统目录中读取Summary数据。 Step3 启动MindInsight 在开发

    来自:帮助中心

    查看更多 →

  • 常见问题

    常见问题 同一个并行文件系统可以挂载至多个客户端吗? 可以。 同一个客户端可以挂载多个并行文件系统吗? 可以,且每一个挂载进程都是独立的。 obsfs挂载到华为 云服务器ECS 上时占用OBS流量还是 云服务器 E CS 的流量? 该情况下占用OBS流量,不占用华为云 服务器 ECS的流量。 挂载的并行文件系统如何让其他用户访问?

    来自:帮助中心

    查看更多 →

  • 迁移限制

    迁移限制 OMS 将对象数据迁移到并行文件系统有哪些限制? 迁移并行文件系统内的对象数据有哪些限制? 创建迁移任务时提示“您选择的目的端桶所在区域与控制台Region不一致,请选择所在区域为xxx的桶或切换控制台Region为xxx”该如何处理? 源端云服务商不在OMS支持范围,该如何迁移?

    来自:帮助中心

    查看更多 →

  • Hive对接OBS文件系统

    Hive服务。 进入beeline客户端,在创建表时指定Location为OBS文件系统路径。 beeline 例如,创建一个表“test”,该表的Location为“obs://OBS并行文件系统名称/user/hive/warehouse/数据库名/表名”: create table

    来自:帮助中心

    查看更多 →

  • 文件列表是否支持排序?

    排序。最后修改时间排序,支持前1000个文件按照时间排序。如果并行文件系统内文件数量超过5000条,文件列表按照英文单词在字典中的先后顺序进行排序,且只支持按文件名的前缀搜索。 图1 文件列表页 父主题: 并行文件系统

    来自:帮助中心

    查看更多 →

  • 挂载第三方租户的对象存储

    BS对象桶或者并行文件系统设置桶策略和桶ACL。 SaaS服务提供商静态导入第三方OBS对象桶和并行文件系统。 SaaS服务提供商进行业务处理,最终需要将处理结果(结果文件或者结果数据)写回第三方租户的桶。 使用须知 仅支持挂载同一区域下的第三方租户的并行文件系统和对象桶。 仅已安装1

    来自:帮助中心

    查看更多 →

  • 开发环境中如何选择存储

    ser/work目录下,该目录下的内容在实例停止后会被保留,存储支持在线按需扩容。 缺点是只能在单个开发环境中使用 。 并行文件系统PFS 说明: 并行文件系统PFS为白名单功能,如需使用,请联系华为技术支持开通。 适合直接使用PFS桶作为持久化存储进行AI开发和探索场景。 数据

    来自:帮助中心

    查看更多 →

  • 入门流程

    桶是OBS中存储对象的容器,在上传对象前需要先创建桶,请参见步骤五:创建桶。并行文件系统与OBS桶操作类似。 将数据上传至OBS,请参见步骤六:上传对象。并行文件系统与OBS桶操作类似。 从OBS中下载数据,请参见步骤七:下载对象。并行文件系统与OBS桶操作类似。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了