存储云服务选型指导

数据特征包括数据类型和数据访问频率。常见指标有结构化/非结构化比例、冷热数据分布。不同存储类型的底层架构模型不同，块存储基于块设备模型，文件存储基于文件系统语义，对象存储基于对象寻址模型。如果数据类型与底层模型不匹配，将导致效率下降或架构复杂度上升。

需要考虑的问题

• 是结构化还是非结构化数据？数据结构决定访问方式，例如数据库依赖块级随机I/O，更适合EVS，多媒体等音视频内容适合OBS。
• 是否需要多实例共享数据？若需要共享目录或数据，则应选择SFS或SFS Turbo。
• 是否存在冷热数据分层？高频读写的热数据适合高性能存储（EVS或SFS Turbo），同时，也可使用OBS根据访问频率对数据进行分层管理。
• 是否存在大量小块随机读写？数据库通常如此，应选择高IOPS块存储。

需要收集的业务信息

• 业务数据类型构成比例：结构化/非结构化数据比例，是否涉及数据库数据，是否涉及音视频等非结构化数据。
• 业务数据的访问模型：
  • 访问频率：根据访问频率对数据进行大致分类，预估每一类数据的占比，以及每类数据每天法人读/写频率，以及每类数据的每日/每月增量。
  • 读写比例：读操作和写操作的占比，是读多写少、写多读少、还是读写均衡。
  • 数据生命周期：数据上传后多久变冷（如日志7天后基本不再访问）。
  • 访问热点分布： 是否为少量数据承载了大量访问量，例如20%数据承载80%访问，还是均匀分布。
• 文件大小的分布：收集小文件（<1MB）、中等、大文件的大致占比分别是多少。

访问协议指应用访问数据的接口方式，包括块设备挂载、文件共享协议（如NFS）及基于HTTP/HTTPS的API接口协议。协议是应用与存储交互的规则，如果协议不匹配，可能导致应用无法读取数据或需要改造应用架构。

需要考虑的问题

• 应用是否依赖本地磁盘形式？若依赖块设备，则优先选EVS。
• 是否需要目录结构和共享挂载？若需要，则选择SFS或SFS Turbo。
• 是否通过API方式访问数据？若以REST API接口访问，则OBS更适配。
• 是否需要通过公网访问？OBS具备良好的公网访问能力，提供公共访问域名，可直接生成外网链接，权限管控便捷。

需要收集的业务信息

• 数据访问方式：应用访问数据的方式，是使用块设备挂载，还是使用文件共享协议，还是基于HTTP/HTTPS的API接口。
• 是否支持云原生改造：如果支持并计划进行云原生改造，那么可以优先考虑OBS，架构更松耦合，扩展能力更强。

存储性能直接影响系统响应时间与业务并发能力，性能维度可关注IOPS、吞吐量、时延和稳定性等指标，这些指标是衡量存储承载能力的关键指标

需要考虑的问题

• 文件数量的量级是多少？伴随着文件数量的增加，列举、查找、遍历等操作的延迟会逐步增加，影响业务效率。需要根据业务文件的规模选择存储方案。
• 文件大小是如何分布的？海量小文件的元数据开销大，访问时列举速度慢，大文件则更多受带宽和分段上传影响。
• 是否为大文件顺序读写？视频处理或AI训练更关注吞吐，可选择SFS Turbo；若数据以批量存取为主且对时延不敏感，也可考虑OBS。
• 是否对访问时效性敏感？若对时延敏感，应优先块存储方案。

需要收集的业务信息

收集性能相关的量化数据，以便更好地匹配存储服务和规格（例如EVS、SFS Turbo规格）：

• 文件数量：收集现有文件总数，日均/月均新增文件数，以及未来1~3年的预计文件数量规模。
• 业务数据峰值IOPS：评估系统处理高频随机读写的能力，避免业务高峰期因底层指令排队导致应用卡顿，从而匹配相应的存储性能规格。
• 峰值吞吐量：评估单位时间内大规模数据的传输能力，直接决定AI训练、大数据等大文件读写场景是否需选用具备高带宽特性的SFS Turbo或OBS。
• 业务可接受时延：明确单次读写操作的响应底线，该指标直接决定存储类型，如对时延极度敏感的核心在线交易系统须优先选用低时延的块存储EVS。

业务发展具有不可预测性，考虑扩展性是为了让存储资源随业务需求弹性伸缩，实现按需配置，既避免因扩容困难阻碍业务增长，又防止资源闲置浪费。

需要考虑的问题

• 数据存储量级预测是多少？数据量通常单向递增，需要结合增长预期和数据量级选择云服务，以避免后期频繁迁移重构。OBS为EB级别，容量近乎无限，EVS为TB级别，SFS、SFS Turbo为PB级别。
• 业务扩容时是否允许系统停机或中断，是否需要在线扩容？停机扩容业务代价极高，支持在线扩容意味着存储架构可以在不影响应用数据读写的情况下动态增加资源，是保障业务连续性的关键。
• 业务是否存在明显的周期性波峰波谷？业务波动要求资源具备弹性伸缩能力，系统需能快速按需扩容应对突发流量（如电商大促），避免资源不足或长期闲置浪费。

需要收集的业务信息

• 历史数据总量与未来三年增长预测：帮助判断是采用支持常规在线扩容的块存储、文件存储，还是必须引入具备海量横向扩展能力的对象存储。
• 业务周期的峰谷特征与突发流量预估：明确资源消耗是平稳线性还是呈现“潮汐式”波动，决定了系统对“弹性资源”的真实依赖度。指导是否需要选用支持动态突发的高吞吐存储（如SFS Turbo），或完全按需扩展的对象存储以规避非高峰期的资源闲置成本。
• 现有应用架构对在线扩容的兼容性：确认应用是否能无缝对接EVS、SFS的在线扩容能力，或者是否具备条件改造为通过API调用、天然解耦的对象存储架构。

成本维度包括容量费用、性能规格费用和长期运维成本。存储投入是长期成本，合理分层可优化总体拥有成本。

需要考虑的问题

• 业务数据的访问频率是如何分布的？数据价值随时间衰减，不区分冷热会导致用昂贵的高性能存储存放低价值数据，对数据进行冷热分层存储是降低成本的重要手段。
• 业务真实的性能需求是多少？存储性能规格与单价呈正相关，过度追求超出实际所需的性能会导致资源长期闲置浪费，必须按需适度配置。
• 数据生命周期有多长？存储服务通常按量持续计费，缺乏数据清理机制会导致容量成本无限膨胀，及时降级或删除失效数据可节约成本。
• 是否频繁通过公网访问？云存储总成本不仅包含“容量费”，还包括“请求读写费”和“公网流出流量费”，除了考虑存储成本外，还需要综合考虑流量与请求成本。

需要收集的业务信息

• 业务数据容量分布与访问频率特征：用于指导构建分层存储架构，例如将高频数据部署于EVS/SFS，低频数据归档至OBS，从而优化总体成本。
• 业务日常与峰值的性能基线：辅助选择合适的存储规格，在满足需求的前提下按需配置，而非全部按最高规格采购。
• 数据合规留存期限与生命周期规划：明确留存周期有助于制定相应的存储降级或数据清理策略。
• 预估的网络下行流量与API请求量：辅助评估整体费用结构，若外部访问流量较多，可考虑结合CDN进行流量分担，或提前规划更合适的计费模式。

数据备份与恢复是选择存储服务时要考虑的关键因素。良好的备份与恢复能力，能保障用户数据的安全性和完整性，当数据由于意外删除、硬件故障等原因丢失后，能快速恢复数据，从而保障业务正常运转。常见指标包括RPO（恢复点目标）、RTO（恢复时间目标）、备份周期及多可用区部署。

需要考虑的问题

• 可接受的数据丢失时间是多少？若不可接受数据丢失，应设计实时复制或频繁备份。
• 故障后恢复时间要求？使用云备份CBR服务，可以快速实现数据恢复。

需要收集的业务信息

• 各系统重要性分级：越重要的数据，需要越完备的备份与恢复机制。
• 业务的RPO/RTO目标：业务连续性要求的两个核心指标。
• 是否有监管备份要求：业务是否受到法律、行业监管机构或审计制度的约束，必须按照规定对数据进行备份、保存、留存或可追溯管理。

云安全工作需要华为云与您共同努力，云平台提供了云服务安全保障体系，但客户有责任实施自己的安全措施来保护数据安全，例如身份认证、访问控制、数据加密、监控、日志记录等。

需要考虑的问题

• 是否涉及敏感或个人数据？敏感数据建议启用加密存储。
• 是否需要细粒度权限控制？多用户或多部门协作场景建议细化访问策略，明确各个用户或部门的数据访问权限。
• 是否有监管审计要求？若有相关要求，可能需要保留访问日志并设置留存周期。

需要收集的业务信息

• 数据分级分类报告：按敏感度和重要性对数据进行分类标识，用于指导安全存储与访问控制策略。
• 行业监管标准：行业内执行的合规准则，旨在明确数据处理与保护的法律要求，确保业务合法运营并规避经营风险。
• 内部安全要求：企业定制的安全管理规范，用于明确内部操作规范与数据访问权限，防范内部风险，保障核心数据资产安全。

• 快速入门：通过控制台、OBS Browser+图形化工具、obsutil命令行工具、OBS SDK快速使用OBS。

  通过以上快速入门，您可以根据业务场景选择适合自己的OBS使用方式，快速上手OBS的基础操作。

• 产品介绍：图解对象存储服务

  一张图带您了解OBS的产品特点、应用场景和主要功能。

• 用户指南：OBS存储类别概述

  OBS提供多种存储类别，包括标准存储、低频访问存储、归档存储和深度归档存储，您可以结合自身业务合理选择。

• 权限配置指南：一张图看懂OBS权限控制

  此教程介绍了OBS的多种权限配置方式，合理配置数据的访问权限能有效保障数据安全。

• 最佳实践：在ECS上通过内网访问OBS

  在ECS上可以通过内网访问OBS，将OBS作为数据存储资源池以减轻服务器负担。了解更多最佳实践请参考OBS最佳实践汇总页。

• 最佳实践：面向AI场景使用OBS+SFS Turbo的存储加速方案概述

  SFS Turbo HPC型支持和OBS数据联动，您可以通过SFS Turbo HPC型文件系统来加速访问OBS中的数据，并将生成的结果数据异步持久化到OBS中长期低成本保存，实现像操作文件系统一样直接使用OBS海量的存储空间。

• 快速入门：快速购买并使用Linux云服务器的云硬盘、快速购买并使用Windows云服务器的云硬盘

  通过此教程，帮助您快速完成云硬盘购买，并挂载给云服务器进行初始化操作，为服务器提供数据存储能力。

• 用户指南：变更云硬盘类型

  在业务快速发展过程中，您可能会遇到现有云硬盘性能逐渐无法满足业务需求的情况。您可以变更云硬盘类型，通过选择更高性能的云硬盘来提升云硬盘性能，从而满足业务需求。

• 用户指南：创建云硬盘快照

  通过使用云硬盘快照，您可以在数据丢失时将数据完整地恢复到创建快照的时间点，从而确保业务的连续性和数据的安全性。

• 最佳实践：通过LVM管理云硬盘

  LVM（逻辑卷管理，Logical Volume Manager）通过在云硬盘和文件系统之间添加一个逻辑层，来为文件系统屏蔽下层云硬盘分区布局，提高硬盘分区管理的灵活性。

• 快速入门：在云服务器上挂载并使用SFS Turbo文件系统（Linux）

  通过此教程，帮助您在SFS Turbo控制台创建SFS Turbo文件系统（NFS协议），并将SFS Turbo文件系统挂载到ECS实例（Linux）上，实现上传和下载文件等操作。

• 产品介绍：SFS Turbo文件系统类型

  通过此教程，您可以快速了解各种类型的SFS Turbo文件系统的特点、优势及应用场景。

• 用户指南：创建SFS Turbo文件系统

  通过此教程，您可以快速了解如何创建SFS Turbo文件系统，在多个云服务器中挂载使用，实现文件系统的共享访问。

• 最佳实践：面向AI场景使用OBS+SFS Turbo的存储加速实践

  OBS+SFS Turbo的存储加速实践，即通过SFS Turbo文件系统来加速对OBS对象存储中的数据访问，同时将生成的结果数据异步持久化到OBS对象存储中长期低成本保存。

• 快速入门：在云服务器上挂载并使用通用文件系统（Linux）

  通过此教程，帮助您在SFS控制台创建通用文件系统（NFS协议），并将通用文件系统挂载到ECS实例（Linux）上，实现上传和下载文件等操作。

• 产品介绍：通用文件系统类型

  通过此教程，您可以快速了解SFS的特点、优势及应用场景。

• 用户指南：创建通用文件系统

  通过此教程，您可以快速了解如何创建通用文件系统，在多个云服务器中挂载使用，实现通用文件系统的共享访问。

• 最佳实践：配置SFS通用文件系统容灾

  通过SFS通用文件系统容灾方案，可以快速恢复业务数据（如生产执行文件、团队协作文档），减少停机损失，或以更优成本构建基础容灾能力，并通过异地备份形成分层防护体系。

• 快速入门：快速创建云服务器备份

  通过此教程，帮助您完成快速购买服务器备份容器并创建云服务器备份，为服务器或磁盘提供保护。

• 用户指南：跨区域复制备份

  通过复制备份功能，您可以快速跨区域部署业务。复制备份创建的新资源与源区域源资源备份时间点的状态保持一致。

• 最佳实践：通过业务分级制定最佳备份策略

  资源的备份策略决定了备份周期与保留规则，实践中需要根据数据的重要程度、用户云上部署的业务系统的不同分级，配置不同的数据备份策略。

• 最佳实践：通过CBR+HSS搭建云上备份防勒索系统

  华为云备份防勒索解决方案与主机安全服务HSS结合，为您提供有效云上防勒索解决方案，满足您对数据安全保护的需求。