对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    编辑器obs 更多内容
  • OBS连接

    linkConfig.obsBucketType 否 String OBS桶类型。 对象桶:OB。 并行文件系统:PFS。 说明: 桶类型分为对象桶和并行文件系统,对象桶过滤文件会比较慢,建议客户使用并行文件桶。 linkConfig.server 是 String OBS 服务器 的终端节点(Endpoint)。

    来自:帮助中心

    查看更多 →

  • Delete OBS

    Delete OBS 约束限制 该功能依赖于OBS服务。 功能 通过Delete OBS节点在OBS服务中删除桶和目录。 参数 用户可参考表1和表2配置Delete OBS节点的参数。 表1 属性参数 参数 是否必选 说明 节点名称 是 节点名称,可以包含中文、英文字母、数字、“

    来自:帮助中心

    查看更多 →

  • 使用可视化编辑器编写模板创建云硬盘

    使用可视化编辑器编写模板创建云硬盘 本教程将指导您通过“使用可视化编辑器编写模板”创建云硬盘。本次教程完成后,在云服务器控制台中可查看到一个已创建好的云硬盘,如图1。 图1 云硬盘创建成功 步骤一:使用可视化编辑器编写模板:使用可视化编辑器添加元素,用可视化编辑器集成的编辑器为各元素添加参数。

    来自:帮助中心

    查看更多 →

  • 通过OBS SDK快速使用OBS

    通过OBS SDK快速使用OBS OBS SDK对OBS服务提供的REST API进行封装,以简化用户的开发工作。您直接调用OBS SDK提供的接口函数即可使用OBS管理数据。 本章节以Java、Python、Go三种SDK为例,帮助您快速上手OBS的基础功能,包括创建桶、上传对象、下载对象、列举对象。

    来自:帮助中心

    查看更多 →

  • 将OBS数据导入至DLI

    直接输入路径或单击选择OBS的路径,如果没有合适的桶可直接跳转OBS创建。 创建OBS表时指定的路径必须是文件夹,如果建表路径是文件将导致导入数据失败。 当OBS的目录下有同名文件夹和文件时,数据导入指向该路径会优先指向文件而非文件夹。 说明: 路径同时支持文件和文件夹。 obs:// DLI /sampledata

    来自:帮助中心

    查看更多 →

  • 创建并提交SQL作业

    可以实现定时删除OBS桶中的对象或者定时转换对象存储类别。 具体操作请参考通过配置生命周期规则。 SQL编辑器页面可以批量执行SQL语句。 作业编辑窗口常用语法采用不同颜色突出显示。 支持单行注释和多行注释。以“--”开头,后续内容即为注释。 使用SQL编辑器创建并提交SQL作业

    来自:帮助中心

    查看更多 →

  • 数据开发操作

    和TEXT文件类型。填写OBS桶导入需要创建外表的一些参数,通过OBS外表将OBS桶文件写入到选择的普通表中。 存算一体(单机部署)8.2.0.100及以上集群版本支持通过OBS文件导入功能。 表3 obs导入参数 参数 描述 样例值 存储位置 从OBS桶文件中选择文件。 - 文件格式

    来自:帮助中心

    查看更多 →

  • 在DLI使用Hudi提交Spark SQL作业

    在DLI使用Hudi提交Spark SQL作业 登录DLI管理控制台,选择“SQL编辑器”首进入提交SQL作业的界面。提交SQL作业时需要选择支持Hudi的Spark SQL队列。 创建一张Hudi表: 将如下的建表语句粘贴至DLI SQL编辑器的输入区域,修改 LOCATION,执行引擎选择Spark

    来自:帮助中心

    查看更多 →

  • Schema编辑

    将当前图的元数据、点边数据集导入到OBS桶内或者从OBS桶内导出。 导入:单击元数据列表中“导入”。在弹出的窗口中,选择要导入的元数据,点边数据集,日志储存路径,边处理以及导入类型后,单击“确定”可将数据从OBS桶内导入到当前图中。 日志储存路径:用于存储导入图过程中不符合元数据定义的点、边数据集和详细日志。

    来自:帮助中心

    查看更多 →

  • 从DLI导入数据到OBS,数据量不一致怎么办?

    确认客户验证数据量的方式是否正确。客户验证的方式如下: 通过OBS下载数据文件。 通过文本编辑器打开数据文件,发现数据量缺失。 根据该验证方式,初步定位是因为文件数据量较大,文本编辑器无法全部读取。 通过执行查询语句,查询OBS数据进一步进行确认,查询结果确认数据量正确。 因此,该问题为验证方式不正确造成。

    来自:帮助中心

    查看更多 →

  • 导出DLI表数据至OBS中

    导出DLI表数据至OBS中 支持将数据从DLI表中导出到OBS服务中,导出操作将在OBS服务新建文件夹,或覆盖已有文件夹中的内容。 注意事项 支持导出json格式的文件,且文本格式仅支持UTF-8。 只支持将DLI表(表类型为“Managed”)中的数据导出到OBS桶中,且导出的路径必须指定到文件夹级别。

    来自:帮助中心

    查看更多 →

  • 使用DLI提交SQL作业查询OBS数据

    使用DLI提交SQL作业查询OBS数据 场景描述 DLI可以查询存储OBS中的数据,本节操作介绍使用DLI提交SQL作业查询OBS数据的操作步骤。 本例新建“sampledata.csv”文件上传OBS桶,并新建弹性资源池队列,使用DLI创建数据库和表,使用DLI提供的SQL编辑器查询表的1000条数据。

    来自:帮助中心

    查看更多 →

  • 下载OBS文件

    url OBS资源的链接。资源链接获取详情请参见OBS控制台指南>通过对象URL访问对象。 download_to 指定下载到哪个目录。 返回值 返回值为0即成功,其他即失败,失败响应参数如错误码所示。 父主题: 资源管理

    来自:帮助中心

    查看更多 →

  • OBS / HDFS / DLI

    OBS / HDFS / DLI GS_138110058 错误码: Invalid option %s. 解决方案:此上下文中的有效选项为:%s。 level: ERROR GS_138110072 错误码: Need type option for the server. 解决方案:此处的有效选项为:%s。

    来自:帮助中心

    查看更多 →

  • OBS工具汇总

    适用于原本使用本地文件系统存储数据的用户,可以把数据存储OBS上但不改变数据的访问方式。 obsfs(已下线) obsfs工具于2024年7月1日下线,下线后OBS不再对此工具提供维护和客户支持服务,请使用s3fs将OBS对象桶挂载至Linux系统。给您带来不便敬请谅解。 - obsftp(已下线)

    来自:帮助中心

    查看更多 →

  • OBSUtil上传

    OBSUtil上传 obsutil是一款用于访问管理华为云 对象存储服务 (Object Storage Service,OBS)的命令行工具,您可以使用该工具对OBS进行常用的配置管理操作,如创建桶、上传文件/文件夹、下载文件/文件夹、删除文件/文件夹等。对于熟悉命令行程序的用户,

    来自:帮助中心

    查看更多 →

  • 创建OBS桶

    创建OBS桶 RES使用对象存储服务(Object Storage Service,简称OBS)进行数据源以及黑白名单和用户数据的存储。因此,在使用RES之前您需要开通OBS服务并创建桶,然后在OBS桶中上传用户数据用于推荐作业的计算。 需要存放在OBS桶中的数据包括: 离线数据

    来自:帮助中心

    查看更多 →

  • 转储至OBS

    数据转储地址 存储该通道数据的OBS桶名称。桶名称在“对象存储服务”中“创建桶”时创建。 - 转储文件目录 在OBS存储通道文件的自定义目录,多级目录可用“/”进行分隔,不能以“/”开头。 取值范围:0~50个字符。 默认配置为空。 - 时间目录格式 数据将存储OBS桶中转储文件目录下,按时间格式作为层级的目录中。

    来自:帮助中心

    查看更多 →

  • OBS桶管理

    OBS桶管理 查询OBS桶列表 查询OBS桶下对象列表 OBS桶授权及取消授权

    来自:帮助中心

    查看更多 →

  • 查询OBS容量

    否 String 无 云服务名,标识资源所属的云服务OBS。 timestamp 是 Long 无 时间戳。 region 是 String 无 资源所属region中文名。 zone_type 否 String 无 OBS为Region全局所用,OBS服务不关联到AZ。 allocated

    来自:帮助中心

    查看更多 →

  • 添加OBS资产

    添加OBS资产 对OBS资产进行云资产委托授权后,参考此章节将您的OBS资产添加到DSC服务,进行敏感数据识别和脱敏。 前提条件 已完成OBS资产委托授权,参考云资产委托授权/停止授权进行操作。 添加自有OBS桶/其他桶,需要开通且已使用过OBS服务,开通OBS服务请参见开通并使用OBS。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了