对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    大数据存储与处理 更多内容
  • 数据存储

    数据存储 如何对OBS的文件重命名? Notebook停止或者重启后,“/cache”下的文件还存在么?如何避免重启? 如何使用pandas库处理OBS桶中的数据? 在Notebook中,如何访问其他账号的OBS桶? JupyterLab默认工作路径是什么? 父主题: Notebook(新版)

    来自:帮助中心

    查看更多 →

  • 大屏数据处理应用模板

    具体操作请参见如何控制接口访问权限。 数据处理应用模板服务集成示例: 如何使用资产 以在屏Demo页面上进行配置为例。 订购并安装部署数据处理应用模板资产到对应的开发环境。 相关操作请参见如何订购&部署资产。 在开发环境首页,如图1所示,单击“项目”页签,单击“业务屏”。 图1 进入业务屏 如图

    来自:帮助中心

    查看更多 →

  • 处理数据

    处理数据 在作业总览中平台支持创建数据标记,数据图标、数据回放、数据集等作业,数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 状态是待脱敏或者脱敏中的数据包不能运行数据回放类型的作业。 数据包类型必须是Rosbag类型。 当选择数据集算子时,数据类型可支持选择通用存储。

    来自:帮助中心

    查看更多 →

  • 处理数据

    处理数据 入门流程 示例:图片质量变换

    来自:帮助中心

    查看更多 →

  • 处理数据

    处理数据 处理模拟数据步骤如下。 用户进入DISDemo函数详情页,选择“dis-test”测试事件,单击“测试”,测试函数,如图1所示。 图1 配置测试事件 函数执行成功后,部分函数日志如图2所示,全部的日志信息,可以到“日志”页签查询。 图2 函数执行结果 父主题: 使用函数处理DIS数据

    来自:帮助中心

    查看更多 →

  • 文件存储与管理

    文件存储管理 新建文件夹 重命名文件(夹) 移动/复制/转发文件 收藏文件(夹) 搜索文件(夹) 查看文件详情 删除个人文件(夹) 父主题: 普通用户指南

    来自:帮助中心

    查看更多 →

  • 数据存储优化

    数据存储优化 操作场景 “ORC”是一种高效的列存储格式,在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端,具体操作请参见使用Hive客户端。 操作步骤 推荐:使用“SNAPPY”压缩,适用于压缩比和读取效率要求均衡场景。

    来自:帮助中心

    查看更多 →

  • 设置数据存储

    普通I/O:后端存储由SATA存储介质提供,适用于容量、读写速率要求不高、事务处理较少的场景,如:开发测试、企业办公应用。 高I/O:后端存储由SAS存储介质提供,适用于性能相对较高、读写速率要求高、有实时数据存储需求的场景,如:创建文件系统、分布式文件共享。 超高I/O:后端存储SSD存储介质提供,

    来自:帮助中心

    查看更多 →

  • 配置数据存储

    单击配置数据存储,弹出配置数据存储页面。 图1 配置数据存储 在如图2所示的计算单元列表中,找到所需查看的计算单元,单击“配置数据存储”为该计算单元配置监控数据存储路径。 在弹出的“配置数据存储”页面,配置如下参数,然后单击“确定”。 表1 数据存储参数说明 参数名称 说明 样例

    来自:帮助中心

    查看更多 →

  • 配置数据存储

    单击配置数据存储,弹出配置数据存储页面。 图1 配置数据存储 在如图2所示的计算单元列表中,找到所需查看的计算单元,单击“配置数据存储”为该计算单元配置监控数据存储路径。 在弹出的“配置数据存储”页面,配置如下参数,然后单击“确定”。 表1 数据存储参数说明 参数名称 说明 样例

    来自:帮助中心

    查看更多 →

  • 数据存储输出

    64}$ 数据存储: 配置项英文名:dataStore 说明: 数据存储,如果需要把管道输出数据保存,则需要指定存储。如果没有指定存储,管道输出数据则不保存。 必选: 是 子配置项: 数据存储配置包含如下子配置项: 存储组ID、存储组名称、数据存储ID、数据存储名称、数据存储属性。 存储组ID:

    来自:帮助中心

    查看更多 →

  • 配置数据存储

    “配置数据存储”,进入“配置数据存储”页面。 或单击页面左侧的“主机监控”,选择待查看的E CS 资源所在行的“操作 > 配置数据存储”,进入“配置数据存储”页面。 (可选)批量配置数据存储。 在“云服务监控”页面,勾选需要“配置数据存储”的云服务资源,单击“批量配置数据存储”,进入“批量配置数据存储”页面。

    来自:帮助中心

    查看更多 →

  • 数据存储优化

    数据存储优化 操作场景 “ORC”是一种高效的列存储格式,在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端,具体操作请参见使用Hive客户端。 操作步骤 推荐:使用“SNAPPY”压缩,适用于压缩比和读取效率要求均衡场景。

    来自:帮助中心

    查看更多 →

  • 数据处理

    数据处理数据服务首页左侧导航,选择“首页>我的数据集”。 在“我的数据集”页签单击新增的数据集。 单击“应用数据集 > 数据处理”。 进入“新增作业”界面,如图1所示。 参数说明如下所示: 作业名称:自定义输入。 开发环境:选择通用编辑器。 作业位置:存储作业脚本的数据湖OB

    来自:帮助中心

    查看更多 →

  • 数据处理

    数据处理 数据处理支持什么类型脚本? 运行环境如何安装Python包? 数据处理可以处理哪些数据源中的数据? 用户注销后,是否会清理数据服务对应的个人数据以及资源,是否还会计费? 父主题: 常见问题

    来自:帮助中心

    查看更多 →

  • 数据处理

    数据处理 Python API接口 管理新增作业 创建开发环境 父主题: 管理基础工具

    来自:帮助中心

    查看更多 →

  • 处理呼叫数据

    呼入呼叫中心时,系统接入码为被叫号码 呼叫中心执行呼出操作时,客户的号码为被叫号码 callid 会话ID。 即呼叫中当次会话的唯一标识,“客户接触历史 > 接触记录”的接触详情中“呼叫ID”保持一致。 mediaType 媒体类型。 1:音视频呼叫 5:多媒体文字交谈 callType

    来自:帮助中心

    查看更多 →

  • 数据处理

    数据选择:在AI开发过程中,采集的数据可能存在大量重复数据,重复数据对模型精度提升并没有太大作用,反而需要花费很多时间对其进行标注。使用数据选择进行数据处理,对采集到的数据去重,根据相似度删除一些重复度比较高的数据数据增强:数据增强的目的是帮助用户增加数据量。 父主题: 数据分析预览

    来自:帮助中心

    查看更多 →

  • 数据处理

    数据处理 训练前需要对数据集进行预处理,转化为.bin和.idx格式文件,以满足训练要求。LoRA微调训练增量预训练使用同一个数据集,即都是alpaca_data.json。 如果已经在增量预训练时处理数据,可以直接使用,无需重复处理。如果未处理数据,请参见数据处理章节先处理数据。

    来自:帮助中心

    查看更多 →

  • 数据处理

    数据处理 数据处理简介 创建数据处理任务 管理和查看数据处理任务 预置算子说明 父主题: 数据管理(旧版即将下线)

    来自:帮助中心

    查看更多 →

  • 数据处理

    数据处理 数据处理介绍 创建工作流 启动工作流

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了