对象存储服务 OBS     

对象存储服务(Object Storage Service)是一款稳定、安全、高效、易用的云存储服务,具备标准Restful API接口,可存储任意数量和形式的非结构化数据。

 
 

    如何存储大量数据 更多内容
  • 数据转发至MongoDB存储

    数据转发至MongoDB存储 场景说明 对于平台的流转数据可以选择让平台将设备上报数据转发给文档数据库服务(DDS),由DDS进行存储(华为云DDS完全兼容MongoDB协议),用户无需做额外的数据存储代码开发即可使用设备数据进行业务处理。本示例为将流转数据转发至文档数据库服务存储。

    来自:帮助中心

    查看更多 →

  • 配置Hive分区元数据冷热存储

    配置Hive分区元数据冷热存储 分区元数据冷热存储介绍 为了减轻元数据库压力,将长时间未使用过的指定范围的分区相关元数据移动到备份表,这一过程称为分区数据冻结,移动的分区数据称为冷分区,未冻结的分区称为热分区,存在冷分区的表称为冻结表。将被冻结的数据重新移回原元数据表,这一过程称为分区数据解冻。

    来自:帮助中心

    查看更多 →

  • 配置管理数据备份存储

    配置管理数据备份存储 配置保存eBackup管理数据数据库及配置文件等)的备份存储信息,用于发生灾难后恢复eBackup管理系统。eBackup支持NFS、S3、FTP和SFTP存储作为管理数据的备份存储。本节介绍如何配置S3类型的备份存储。 背景信息 备份eBackup管理数

    来自:帮助中心

    查看更多 →

  • 数据超过了RDS for MySQL实例的最大存储容量怎么办

    磁盘空间分布 问题原因 业务数据增加。 数据空间占用过大。 由于大量的事务和写入操作产生了大量的RDS for MySQL Binlog日志文件。 应用中存在大量的排序查询,产生了过多的临时文件。 解决方案 随着业务数据的增加,原来申请的数据库磁盘容量可能会不足,建议用户扩容磁盘空间,确保磁盘空间足够。

    来自:帮助中心

    查看更多 →

  • 如何清理与回收存储空间?

    如何清理与回收存储空间? GaussDB (DWS)数据仓库中保存的数据在删除后,可能没有释放占用的磁盘空间形成脏数据,导致磁盘浪费、创建及恢复快照性能下降等问题,如何清理? 清理与回收存储空间对系统的影响如下: 删除无用的脏数据,释放存储空间。 数据库将进行大量读写操作,可能影响正常使用,建议选择空闲时间执行。

    来自:帮助中心

    查看更多 →

  • 大量回滚事务拖慢Undo空间回收

    大量回滚事务拖慢Undo空间回收 问题现象 使用gs_async_rollback_xact_status视图查看有大量的待回滚事务,且待回滚的事务数量维持不变或者持续增高。 select * from gs_async_rollback_xact_status(); 处理方法

    来自:帮助中心

    查看更多 →

  • 大量回滚事务拖慢Undo空间回收

    大量回滚事务拖慢Undo空间回收 问题现象 使用gs_async_rollback_xact_status视图查看有大量的待回滚事务,且待回滚的事务数量维持不变或者持续增高。 select * from gs_async_rollback_xact_status(); 处理方法

    来自:帮助中心

    查看更多 →

  • 运行Spark任务发现大量shuffle结果丢失

    运行Spark任务发现大量shuffle结果丢失 问题现象 Spark任务运行失败,查看任务日志发现大量打印shuffle文件丢失。 原因分析 Spark运行的时候会将临时产生的shuffle文件放在executor的临时目录中,方便后面获取。 而当某个executor异常退出时

    来自:帮助中心

    查看更多 →

  • 入门实践

    加解密大量数据 当有大量数据(例如:照片、视频或者数据库文件等)需要加解密时,用户可采用信封加密方式加解密数据,无需通过网络传输大量数据即可完成数据加解密。 使用加密SDK进行本地文件加解密 加密SDK提供了数据的加解密、文件流加解密等功能,用户只需调用加解密接口即可轻松实现海量数据加解

    来自:帮助中心

    查看更多 →

  • Notebook停止或者重启后,“/cache”下的文件还存在么?如何避免重启?

    存在么?如何避免重启? “/cache”目录下存储的是临时文件,在Notebook实例停止或重启后,不会被保存。存储在“/home/ma-user/work”目录下的数据,在Notebook实例停止或重启后,会被保留。 为避免重启,请勿在开发环境中进行重型作业训练,如大量占用资源的作业。

    来自:帮助中心

    查看更多 →

  • 开通数据库代理后有大量select请求分发到主节点

    开通数据库代理后有大量select请求分发到主节点 原因分析: 延时阈值参数 只读实例同步主实例数据时允许的最长延迟时间。延时阈值仅在存在只读实例时生效。为避免只读实例读取的数据长时间和主实例不一致,当一个只读实例的延迟时间超过设置的延迟阈值,则不论该只读实例的读权重是多少,读请求都不会转发至该只读实例。

    来自:帮助中心

    查看更多 →

  • ntpdate修改时间导致HDFS出现大量丢块

    ntpdate修改时间导致HDFS出现大量丢块 问题背景与现象 用ntpdate修改了集群时间,修改时未停止集群,修改后HDFS进入安全模式,无法启动。 退出安全模式后启动,hfck检查丢了大概1 TB数据。 原因分析 查看NameNode原生页面发现有大量的块丢失。 图1 块丢失 查看原生页面Datanode

    来自:帮助中心

    查看更多 →

  • 数据保护技术

    数据保护技术 DEW通过多种数据保护手段和特性,保障存储在DEW中数据安全可靠。 数据保护手段 简要说明 详细介绍 传输加密(HTTPS) DEW支持HTTPS传输协议,为数据传输的安全性提供保证。 如何构造HTTPS协议请求 密钥管理 用户密钥材料的管理和存储采用硬件加密机进行保护,避免密钥泄露。

    来自:帮助中心

    查看更多 →

  • 存储容灾服务是如何收费的?

    存储容灾服务是如何收费的? 计费方式 存储容灾服务只收取使用SDRS的费用,不包含E CS 、EVS等被保护资源的费用。 由用户创建的生产站点资源保持原有计费方式不变,由SDRS创建的容灾站点资源需要按需收取所使用的ECS和EVS资源的费用。ECS和EVS的计费情况请分别参考对应服务的价格详情。

    来自:帮助中心

    查看更多 →

  • 如何配置CTS审计日志存储180天?

    如何配置 CTS 审计日志存储180天? 问题描述 搜索回溯一些问题,需要审计日志存储180天,如何配置审计日志存储时间? 操作步骤 开通 云审计 日志后,系统会自动创建一个名为system的管理事件追踪器,并将当前租户的所有操作记录在该追踪器中。在追踪器中配置CTS转储到LTS,配置完

    来自:帮助中心

    查看更多 →

  • 如何选择Kafka实例的存储空间?

    如何选择Kafka实例的存储空间? 存储空间主要是指用于存储消息(包括副本中的消息)、日志和元数据所需要的空间。选择存储空间时,需要选择磁盘类型和磁盘大小。更多磁盘信息,请参考如何选择磁盘类型。 假设业务存储数据保留天数内磁盘大小为100GB,则磁盘容量最少为100GB*副本数 +

    来自:帮助中心

    查看更多 →

  • 如何扩容容器的存储空间?

    如何扩容容器的存储空间? 使用场景 容器默认大小为10G,当容器中产生数据较多时,容易导致容器存储空间不足,可以通过此方法来扩容。 解决方案 登录CCE控制台,单击集群列表中的集群名称。 在左侧导航栏中选择“节点管理”。 切换至“节点”页签,选择集群中的节点,单击操作列中的“更多

    来自:帮助中心

    查看更多 →

  • RDS实例磁盘满导致实例异常的解决方法

    RDS数据库的磁盘空间满,导致实例变为只读状态,应用无法对RDS数据库进行写入操作,从而影响业务正常运行。 通过磁盘空间占用分布发现占用高的空间,如何通过DBA助手查看磁盘空间分布请参见容量预估。 图1 磁盘空间分布 问题原因 业务数据增加。 数据空间占用过大。 由于大量的事务和写入操作产生了大量的RDS

    来自:帮助中心

    查看更多 →

  • KVS加速广告归因业务效率

    依赖广告检测。广告检测平台需要接受大量曝光、点击、浏览等事件数据,并实时处理。在落地过程中存在诸多挑战: 数据量大 广告监测平台会收到大量的曝光、点击、浏览时间,其中可能包括大量的造假时间,每天存储数据条数,达到几十到几百亿条,而且很需要长期存储(通常为90天)。 业务请求规模不可预知

    来自:帮助中心

    查看更多 →

  • 边缘节点空间不足如何处理?

    如果边缘节点上的容器应用有大量日志输出,并挂载到主机上,也可能占用节点过多存储空间。 排查是否有输出大量日志的容器应用。如果有,在容器应用详情页“更新升级”页签下找到“高级配置 > 数据存储”,检查是否使用本地卷挂载日志。删除对应卷,更新应用。如果挂载内容无需持久化存储,建议使用empt

    来自:帮助中心

    查看更多 →

  • 开通数据库代理后,还是有大量select请求分发到主节点

    开通数据库代理后,还是有大量select请求分发到主节点 原因分析: 读权重参数 设置主节点和只读节点的读权重分配,可以控制读请求的分发配比,仅在存在只读节点时生效。 例如:一主两只读,设置的读权重为1(主):2(只读1):3(只读2),那么会按照1:2:3将读请求分发到主和只读

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了