对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    对象存储列举并行文件系统 更多内容
  • 关于并行导入

    e_stream_operator控制)才能够使用。 概述 并行导入将存储在 服务器 普通文件系统中的数据导入到 GaussDB数据库 中。 并行导入功能通过外表设置的导入策略、导入数据格式等信息来识别数据源文件,利用多DN并行的方式,将数据从数据源文件导入到数据库中,从而提高整体导入性能。如图1所示:

    来自:帮助中心

    查看更多 →

  • 并行查询(PQ)

    并行查询(PQ) 并行查询简介 注意事项 开启并行查询 验证并行查询效果 父主题: 常见内核功能

    来自:帮助中心

    查看更多 →

  • 并行查询简介

    并行查询简介 什么是并行查询 云数据库 GaussDB (for MySQL)支持了并行执行的查询方式,用以降低分析型查询场景的处理时间,满足企业级应用对查询低时延的要求。并行查询的基本实现原理是将查询任务进行切分并分发到多个CPU核上进行计算,充分利用CPU的多核计算资源来缩短查

    来自:帮助中心

    查看更多 →

  • 并行处理

    分支名”获取该分支的执行结果。 失败时停止 并行处理出现错误时的是否停止。 True:表示任一并行处理的分支出现错误时,整个任务便停止,并返回错误信息。 False:表示并行处理的分支出现错误后,整个任务会继续执行后续节点。 超时时间(ms) 并行处理过程的最长执行时间,如果超过该时间

    来自:帮助中心

    查看更多 →

  • 关于并行导出

    关于并行导出 使用GDS工具将数据从数据库导出到普通文件系统中,适用于高并发、大量数据导出的场景。使用外表做并行导出时,需要开启steam算子后才能够使用GDS工具导出。 概述 通过外表导出数据:通过外表设置的导出模式、导出数据格式等信息来指定待导出的数据文件,利用多DN并行的方

    来自:帮助中心

    查看更多 →

  • 创建迁移任务组

    选择目的端桶Region 单击控制台左侧“服务列表”,选择“迁移 > 对象存储迁移服务 OMS ”,进入“对象存储迁移服务”页面。 您也可以在搜索框中输入“OMS”,快速查找“对象存储迁移服务 OMS”,如图2所示。 图2 选择对象存储迁移服务 在左侧导航树,选择“迁移任务组”,切换到“迁移任务组”页面。

    来自:帮助中心

    查看更多 →

  • 拖拽上传

    拖拽上传 OBS Browser+提供强大的拖拽上传功能,您可以将本地的一个或多个文件或者文件夹拖拽到对象存储的对象列表或者并行文件系统的对象列表中;同时您也可以将文件或文件夹拖拽到指定的目录上,这样可以上传到指定的目录中。拖拽上传可以轻松便捷地帮你把本地文件上传到OBS中。 父主题:

    来自:帮助中心

    查看更多 →

  • 数据并行导入

    数据并行导入 实现原理 数据并行导入(加载)的核心思想是充分利用所有节点的计算能力和I/O能力以达到最大的导入速度。DWS的数据并行导入实现了对指定格式(支持 CS V/TEXT格式)的外部数据高速、并行入库。 所谓高速、并行入库是和传统的使用INSERT语句逐条插入的方式相比较。并行导入过程中:

    来自:帮助中心

    查看更多 →

  • 开启并行查询

    Global 并行执行的最大活跃线程个数。当并行执行的活跃线程超过该值时,新的查询将不允许启用并行执行。 取值范围:0-4294967295 默认值:64 parallel_default_dop Global, Session 并行执行的默认并行度。当查询语句没有指定并行度时,使用该值。

    来自:帮助中心

    查看更多 →

  • OMS将对象数据迁移到并行文件系统有哪些限制?

    OMS将对象数据迁移到并行文件系统有哪些限制? OMS将对象数据迁移到并行文件系统有以下限制(并行文件系统限制): 若对象名以/结尾,则对象大小必须为0,否则不支持迁移。 对象名中不能出现连续/,例如:test//test。 在同一层级中,文件和文件夹的名称不能相同。 父主题: 迁移限制

    来自:帮助中心

    查看更多 →

  • 创建迁移任务组

    选择目的端桶Region 单击控制台左侧“服务列表”,选择“迁移 > 对象存储迁移服务 OMS”,进入“对象存储迁移服务”页面。 您也可以在搜索框中输入“OMS”,快速查找“对象存储迁移服务 OMS”,如图2所示。 图2 选择对象存储迁移服务 在左侧导航树,选择“迁移任务组”,切换到“迁移任务组”页面。

    来自:帮助中心

    查看更多 →

  • 开始使用

    IAM控制台,选择左侧列表栏中的“委托”,即可查看快速部署的委托。 图1 查看创建的委托 登录对象存储服务 OBS控制台,选择左侧列表的“并行文件系统”,即可查看快速部署的并行文件系统。 图2 查看创建的并行文件系统 创建存算分离集群 该示例帮助您创建 MapReduce服务 ,在新建集群中配置现

    来自:帮助中心

    查看更多 →

  • 对象存储服务

    对象存储服务 对象存储服务连接器用于对接华为云对象存储服务。 对象存储服务(Object Storage Service,简称OBS)是一个基于对象的海量存储服务,为您提供海量、安全、高可靠、低成本的数据存储能力。 创建对象存储服务连接 登录新版ROMA Connect控制台。

    来自:帮助中心

    查看更多 →

  • 创建单个迁移任务

    源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容,上传对象,列举已上传段,取回归档存储对象。获取方式参见目的端桶权限获取。 已在OBS服务中创建桶。

    来自:帮助中心

    查看更多 →

  • 创建迁移任务组

    多个迁移任务中并行迁移。 前提条件 已 注册华为账号 并开通华为云,完成实名认证。 已获取源端和目的端账号的AK/SK。 源端桶对应账户需要的权限包括:列举桶,获取桶位置,列举对象,获取对象元数据,获取对象内容。获取方式参见源端桶权限获取。 目的端桶需要的权限包括:列举桶,获取桶位置

    来自:帮助中心

    查看更多 →

  • 资源包概述

    时使用第一个5年资源包,以此类推。 OBS提供的以下资源包也同时支持并行文件系统: 表2 并行文件系统资源包说明 资源包 作用 使用限制 标准存储包(单AZ) 用于抵扣单AZ并行文件系统产生的标准存储数据容量费用。 只适用于单AZ并行文件系统产生的标准存储数据容量计费,且只能用于资源包所属区域。

    来自:帮助中心

    查看更多 →

  • 设置对象属性

    使用双引号)。 fs 附加参数,可选 是否使用并行文件系统列举方式,如果桶是并行文件系统,推荐加上该参数。 注意: 该列举方式会因为目录结构,耗时会差别很大。 该参数开启后,会忽略marker和limit值,统计桶或者并行文件系统或者指定目录的大小。 Util 5.5.12版本及以上支持该参数。

    来自:帮助中心

    查看更多 →

  • 恢复归档存储对象

    待恢复cold存储对象的版本号。 fs 附加参数,可选 是否使用并行文件系统列举方式,如果桶是并行文件系统,推荐加上该参数。 注意: 该列举方式会因为目录结构,耗时会差别很大。 该参数开启后,会忽略marker和limit值,统计桶或者并行文件系统或者指定目录的大小。 Util 5.5.12版本及以上支持该参数。

    来自:帮助中心

    查看更多 →

  • 使用catalog连接非安全认证hive on obs

    xml配置文件,查找相关参数。 vim hive-site.xml catalog中的obs指的是obs桶,不是obs并行文件系统,目前还不支持obs并行文件系统。 父主题: 创建 MRS Hive连接

    来自:帮助中心

    查看更多 →

  • 截断对象(Java SDK)

    OBS支持的region以及region与endPoint的对应关系,详细信息请参见地区与终端节点。 目前接口仅在并行文件系统支持,普通对象并行文件系统不支持,如何创建并行文件系统请参考创建并行文件系统(Java SDK)。 方法定义 obsClient.truncateObject(TruncateObjectRequest

    来自:帮助中心

    查看更多 →

  • 创建迁移任务

    选择目的端桶Region 单击控制台左侧“服务列表”,选择“迁移 > 对象存储迁移服务 OMS”,进入“对象存储迁移服务”页面。 您也可以在搜索框中输入“OMS”,快速查找“对象存储迁移服务 OMS”,如图2所示。 图2 选择对象存储迁移服务 在“迁移任务”页面,单击页面右上角的“创建迁移任务”,如图3所示。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了