OBS的数据冗余存储方式是什么？ OBS采用Erasure Code（EC，纠删码）算法做数据冗余，不是以副本的形式存储。 在满足同等可靠性要求的前提下，EC的空间利用率优于多副本。 数据冗余存储策略为“单AZ”的桶，在AZ内的节点间使用EC算法做数据冗余；“多AZ”的桶在AZ内

查看更多 →

热数据存储和冷数据存储的区别？ 热数据存储和冷数据存储最大的区别在于存储介质不同： 热数据存储是直接将频繁被查询或更新，对访问的响应时间要求很高的热数据存储在DN数据盘中。 冷数据存储将不更新，偶尔被查询，对访问的响应时间要求不高的冷数据存储在OBS中。 因为其存储介质的不同，决

查看更多 →

数据上链的方式 数据以区块的形式上链，出块策略在购买 BCS 实例时可以进行选择，在有新交易产生的前提下，如果时间达到1s或者交易数量达到500或者区块容量达到2M，哪个最先达到就立即出块。如何设置区块生成配置信息请参考基于CCE集群。 父主题： 数据上链

查看更多 →

数据存储 如何对OBS的文件重命名？ Notebook停止或者重启后，“/cache”下的文件还存在么？如何避免重启？ 如何使用pandas库处理OBS桶中的数据？ 在Notebook中，如何访问其他账号的OBS桶？ JupyterLab默认工作路径是什么？ 父主题： Notebook（新版）

查看更多 →

主要适用于TB到数百TB级数据且对时效性要求较高、能够接受额外的服务成本，使用物理存储介质（Teleport设备、外置USB硬盘驱动器、SATA硬盘驱动器、SAS硬盘驱动器等）上传大量数据的场景。 1.解决海量数据传输的难题（包括高昂网络成本、较长传输时间等）。 2.DES传输数据的速度可达到1

查看更多 →

如果报错的是三方包里面的类，可能是因为Spark已经自带了相关的jar包，但是和代码中使用的版本不一致。 操作步骤 方案一： 针对jar包冲突的问题，可以确认是否不需使用三方工具的包，如果可以更改为集群相同版本的包，则修改引入的依赖版本。 建议用户尽量使用 MRS 集群自带的依赖包。 方案二： jar包版本修改演示

查看更多 →

如果报错的是三方包里面的类，可能是因为Spark已经自带了相关的jar包，但是和代码中使用的版本不一致。 操作步骤 方案一： 针对jar包冲突的问题，可以确认是否不需使用三方工具的包，如果可以更改为集群相同版本的包，则修改引入的依赖版本。 建议用户尽量使用MRS集群自带的依赖包。 方案二： jar包版本修改演示

查看更多 →

如果报错的是三方包里面的类，可能是因为Spark已经自带了相关的jar包，但是和代码中使用的版本不一致。 操作步骤 方案一： 针对jar包冲突的问题，可以确认是否不需使用三方工具的包，如果可以更改为集群相同版本的包，则修改引入的依赖版本。 建议用户尽量使用MRS集群自带的依赖包。 方案二： jar包版本修改演示

查看更多 →

如果报错的是三方包里面的类，可能是因为Spark已经自带了相关的jar包，但是和代码中使用的版本不一致。 操作步骤 方案一： 针对jar包冲突的问题，可以确认是否不需使用三方工具的包，如果可以更改为集群相同版本的包，则修改引入的依赖版本。 建议用户尽量使用MRS集群自带的依赖包。 方案二： jar包版本修改演示

查看更多 →

案例：调整中间表存储方式 在 GaussDB (DWS)中行存表使用行执行引擎，列存表使用列执行引擎。如果一个SQL语句涉及的表既有行存表又有列存表，系统会自动选择行执行引擎。由于列执行引擎的性能(除indexscan相关的算子)比行执行引擎性能要好很多，因此一般建议使用列存表。特别

查看更多 →

案例：调整中间表存储方式 现象描述 在GaussDB中行存表天然的使用行执行引擎，列存表天然的使用列执行引擎。如果一个SQL语句涉及的表既有行存表又有列存表，系统会自动选择行执行引擎。由于列执行引擎的性能(除indexscan相关的算子)比行执行引擎性能要好很多，因此一般建议使用

查看更多 →

示例：帐号A是桶的拥有者，账号B拥有桶写入权限。B对桶的写入权限被A删除以后，B的账单文件将无法存储至桶资源中。更多信息请参见配置桶ACL。 场景2：桶的拥有者（或者具备该桶的ACL写权限的帐号）删除了已开通账单数据存储功能的OBS桶的账单数据推送帐号。 示例：帐号A是桶的拥有者，账号B拥有桶的访问权限。A删除B以

查看更多 →

Path格式来指定源属性，以作为输出属性的取值。 类型： STRING 必选： 是 约束： 需要符合正则表达式： ^.{1,1000}$ 标签： 配置项英文名：tag 说明： 是否作为时序分析的标签。其对应属性的类型必须为STRING，如果属性的类型不STRING，此配置忽略。 类型：

查看更多 →

数据存储优化 操作场景 “ORC”是一种高效的列存储格式，在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端，具体操作请参见使用Hive客户端。 操作步骤 推荐：使用“SNAPPY”压缩，适用于压缩比和读取效率要求均衡场景。

查看更多 →

单击页面左侧导航栏的“云服务监控”，进入“云服务监控”页面，选择待查看的云服务资源所在行的“配置数据存储”，进入“配置数据存储”页面。 或单击页面左侧的“主机监控”，选择待查看的E CS 资源所在行的“操作 > 配置数据存储”，进入“配置数据存储”页面。 （可选）批量配置数据存储。 在“云服

查看更多 →

OBS的数据存储在哪里？ 在OBS上创建桶时，您可以指定一个区域。在该区域内，您的数据存储在多台设备上。 父主题： 产品咨询

查看更多 →

配置数据存储 配置数据存储是指对所有监控指标原始数据的保存。如果您尚未配置数据存储的OBS桶，则该项显示为空。在如图2所示的计算单元列表中，找到所需要的计算单元，然后单击“配置数据存储”可以将监控数据永久存储到OBS桶中，配置完成后，“永久数据存储 ”将显示所配置的OBS路径。 配置数据存储

查看更多 →

自动创建存储，需要输入存储的容量。 存储类型选择云硬盘时，需要先选择创建云硬盘的可用区。 选择存储子类型。 高IO：指由SAS存储介质构成的云硬盘。 普通IO：指由SATA存储介质构成的云硬盘。 超高IO：指由SSD存储介质构成的云硬盘。 输入存储容量，单位为GB。请不要超过存储容量配额，否则会创建失败。

查看更多 →

数据存储优化 操作场景 “ORC”是一种高效的列存储格式，在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端，具体操作请参见使用Hive客户端。 操作步骤 推荐：使用“SNAPPY”压缩，适用于压缩比和读取效率要求均衡场景。

查看更多 →

x和Hive3.x版本） 端口说明 hive.metastore.port 9083 MetaStore提供Thrift服务的端口。迁移过程中，需要访问该端口查询表元数据信息。 HBase组件端口 表5 HBase组件端口 配置参数 默认端口（HBase1.x和HBase 2.x版本） 端口说明

查看更多 →

接入大数据存储 接入DWS数据源 接入GREENPLUM数据源 父主题： 接入数据源

查看更多 →