中软国际数据治理专业服务解决方案实践

oSQL服务，提供毫秒级随机读写能力，适用于海量(半)结构化、时空、时序数据存储，可被广泛应用于物联网、车联网、金融、智慧城市、气象等行业。 CloudTable提供基于Doris全托管的实时数仓服务，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景

查看更多 →

什么情况下使用Teleport？ 用户有30TB~500TB海量数据迁移需求的场景，选用华为云DES的Teleport方式迁移数据。 用户需求快速迁移数据，对迁移速率，迁移时间要求比较紧急的场景，选用Teleport方式实现快速传输数据。 父主题： 服务概念类

查看更多 →

oSQL服务，提供毫秒级随机读写能力，适用于海量（半）结构化、时空、时序数据存储，可被广泛应用于物联网、车联网、金融、智慧城市、气象等行业。 CloudTable提供基于Doris全托管的实时数仓服务，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景

查看更多 →

与其他服务的关系 通过数据快递服务用户可以安全、快速、高效传输数据，解决海量数据上云难的问题。 DES通过Teleport或磁盘两种数据传输方式，将数据上传至OBS的桶中存储，因此DES必须与OBS配合使用，在使用DES前必须先在OBS创建桶。 与OBS关系如图1。 图1 与OBS关系示意图

查看更多 →

其他信息（宗教信仰、精准定位） 敏感数据的保护方式 敏感数据识别与添加标签 从海量数据中将数据进行分类分级，方便进行不同粒度和级别的安全管理。 数据泄露检测与防护 如果出现频繁访问敏感数据的异常行为，可以及时进行风险告警。 数据静态脱敏、数据水印 对于已标记特定安全级别的敏感数据，可在对外提供数据时进行脱敏或者加水印。

查看更多 →

op集群（ MRS ）的Hive、Hudi数据的交互式快速查询场景。 HetuEngine跨源功能简介 出于管理和信息收集的需要，企业内部会存储海量数据，包括数目众多的各种数据库、数据仓库等，此时会面临数据源种类繁多、数据集结构化混合、相关数据存放分散等困境，导致跨源查询开发成本高，跨源复杂查询耗时长。

查看更多 →

doop、Spark、HBase、Kafka、Storm等大数据组件，并具备在后续根据业务需要进行定制开发的能力，帮助企业快速构建海量数据信息处理系统，并通过对海量信息数据实时与非实时的分析挖掘，发现全新价值点和企业商机。 MRS与OBS对接的具体操作，请参见华为云MRS对接OBS。

查看更多 →

数据资产简介 在自动驾驶产品的开发过程中，海量的数据存储和管理是当前自动驾驶平台面临的业务挑战之一。 Octopus平台的数据服务模块提供了海量数据采集、存储以及数据并行处理等功能，供后续服务进行统一使用。数据服务开发流程如下： 图1 数据服务开发流程 地图管理：支持上传高精地图数据，可用于数据回放、仿真场景等功能。

查看更多 →

索引能力增强，轻松应对海量数据复杂查询场景。 数据秒级闪回、PITR等数据恢复能力，构筑极高的数据可靠性。 超高性能 宽表模型，支持结构化/半结构化数据的PB级存储。 超强写入性能，数倍纯读性能提升，2倍读写性能提升。 解决开源痛点 解决了开源Cassandra数据一致性和GC的问题。

查看更多 →

HBase支持消息数据、报表数据、推荐类数据、风控类数据、日志数据、订单数据等结构化、半结构化的KeyValue数据存储。 利用 DLI ，用户可方便地将海量数据高速、低时延写入HBase。 表格存储服务 （CloudTable），是基于Apache HBase提供的分布式、可伸缩、全

查看更多 →

应用场景 交易型应用 大并发、大数据量、以联机事务处理为主的交易型应用，如政务、金融、电商、O2O、电信CRM/计费等，服务能力支持高扩展、弹性扩缩，应用可按需选择不同的部署规模。 详单查询 具备PB级数据负载能力，通过内存分析技术满足海量数据边入库边查询要求，适用于安全、电信、金融、物联网等行业的详单查询业务。

查看更多 →

气象类加工算子能力清单 数据加工算子为用户提供了多种数据操作能力，包括数据提取、过滤、转换、打标签等。这些算子能够帮助用户从海量数据中提取出有用信息，并进行深度加工，以生成高质量的训练数据。 平台支持气象类数据集的加工操作，气象类加工算子能力清单见表1。 表1 气象类加工算子能力清单

查看更多 →

加快环境部署。 企业分支、科研组织机构等跨全球地理位置进行及时协同工作，提高效率。 可以利用公有云的跨地域能力，共享计算资源，海量数据，并能实现云端大数据分析。 优化性能 性能比普通 云服务器 大幅提升。 通过虚拟化优化（SR-IOV、PCI直通）等，各类测试报告显示：大规模云化HPC性能损耗不大。

查看更多 →

Distribute FileSystem）是一个适合运行在通用硬件之上，具备高度容错特性，支持高吞吐量数据访问的分布式文件系统，适合大规模数据集应用。 HDFS适用于如下场景。 处理海量数据（TB或PB级别以上） 需要很高的吞吐量 需要高可靠性 需要很好的可扩展能力 HDFS开发接口简介

查看更多 →

HBase支持消息数据、报表数据、推荐类数据、风控类数据、日志数据、订单数据等结构化、半结构化的KeyValue数据存储。 利用DLI，用户可方便地将海量数据高速、低时延写入HBase。 表格存储 服务（CloudTable），是基于Apache HBase提供的分布式、可伸缩、全

查看更多 →

分析强劲，基于AI对用户行为、实体画像等多种维度数据关联分析。 全面解析云原生的数据结构，运用AI驱动的智能检索引擎，海量数据秒级检索。 开放 云原生的数据采集能力，天然与云网络、云服务的数据对接。 开放的云原生架构，支持与第三方生态的能力和数据集成。

查看更多 →

下。 弹性文件服务 SFS 弹性文件服务提供托管的共享文件存储，符合标准文件协议（NFS），能够弹性伸缩至PB规模，具备可扩展的性能，为海量数据、高带宽型应用提供有力支持。 您可以使用弹性文件服务作为容器的持久化存储，在创建工作负载的时候挂载到容器上。 云审计 服务 CTS 云审计

查看更多 →

服务，提高访问效率。 存储服务 数据快递服务（Data Express Service，DES） 通过DES实现海量数据快速传输上云。 存储服务 对象存储服务 （Object Storage Service，OBS） 可供用户存储任意类型和大小的数据。

查看更多 →

B规模，具备可扩展的性能，为海量数据、高带宽型应用提供有力支持。 数据湖探索（DLI） 基因容器使用数据湖探索服务提供的Spark能力，对GATK、BWA等业务流程进行加速。数据湖探索（Data Lake Insight，简称DLI）是完全托管的数据分析服务，用户无需管理任何 服务器 ，即开即用；本服务基于Spark

查看更多 →

HBase中获取数据，作为作业的输入数据。HBase是一个稳定可靠，性能卓越、可伸缩、面向列的分布式云存储系统，适用于海量数据存储以及分布式计算的场景，用户可以利用HBase搭建起TB至PB级数据规模的存储系统，对数据轻松进行过滤分析，毫秒级得到响应，快速发现数据价值。DLI可以

查看更多 →

存储桶，即为OBS服务中的“桶”，是OBS中存储对象的容器，提供海量、安全、高可靠、低成本的数据存储能力。 通用文件系统为用户提供一个完全托管的共享文件存储，能够弹性伸缩至PB规模，具备高可用性和持久性，为海量数据、高带宽型应用提供有力支持。 存储数据的逻辑 并行文件系统存放的是文件，但支持原来对

查看更多 →