HetuEngine依赖的组件 名称 描述 HDFS Hadoop分布式文件系统（Hadoop Distributed File System），提供高吞吐量的数据访问，适合大规模数据集方面的应用。 Hive 建立在Hadoop基础上的开源的 数据仓库 ，提供类似SQL的Hive Query

查看更多 →

分布式缓存实例的存储类型，当前只支持Redis DISTRIBUTED_CACHE_VERSION 分布式缓存实例的版本号 DISTRIBUTED_CACHE_NAME 分布式缓存实例的名称 DISTRIBUTED_CACHE_HOST 分布式缓存实例的连接IP地址 DISTRIBUTED_CACHE_PORT

查看更多 →

缓存能力的构建步骤表1。 执行缓存清理操作前，请务必仔细阅读以下缓存清理风险以及注意事项： 由于缓存目录为同租户共享，频繁清理缓存会概率性导致同租户用户构建异常（常表现为“xxx文件不存在”），因此只可在缓存异常时清理，任务执行成功后务必再次编辑任务，删除清理命令，并且在执行清理

查看更多 →

缓存配置常见问题 如何提高CDN缓存命中率？ 缓存配置中配置缓存过期时间为365天，未过期，为什么有些文件能下载有些不能？ CDN会缓存 404、403状态码吗？ 访问 CDN加速 域名，无法正常登录或者显示其他用户信息？ 父主题： 缓存配置

查看更多 →

为什么存储小文件过程中，缓存中的数据会丢失 问题 在存储小文件过程中，系统断电，缓存中的数据丢失。 回答 由于断电，当写操作完成之后，缓存中的block不会立即被写入磁盘，如果要同步地将缓存的block写入磁盘，用户需要将“客户端安装路径/HDFS/hadoop/etc/hadoop/hdfs-site

查看更多 →

为什么存储小文件过程中，缓存中的数据会丢失 问题 在存储小文件过程中，系统断电，缓存中的数据丢失。 回答 由于断电，当写操作完成之后，缓存中的block不会立即被写入磁盘，如果要同步地将缓存的block写入磁盘，用户需要将“客户端安装路径/HDFS/hadoop/etc/hadoop/hdfs-site

查看更多 →

Redis）主备部署，通过将热点数据放入缓存服务Redis，加快用户端访问速度，提升用户体验。 云数据库 RDS（MySQL）主备部署，提供具备跨可用区故障容灾能力的高可用数据库。 方案优势 分布式 分布式RabbitMQ 作为消息队列中间件，可以缓解流量压力，避免尖峰流量对应用的影响。 高可用 分布式缓存服务 D CS （

查看更多 →

分布式消息（Kafka） 分布式消息（Kafka）连接器包含“Topic列表”、“发送数据”、“指定分区发送”三个执行动作和“消费消息”一个触发事件。 连接参数 创建分布式（Kafka）连接时连接参数说明如表1所示。如果需要连接的Kafka配置了IP地址白名单限制，则需要放通 集成工作台 公网出口访问地址“124

查看更多 →

分布式模型训练 分布式训练功能介绍 创建单机多卡的分布式训练（DataParallel） 创建多机多卡的分布式训练（DistributedDataParallel） 示例：创建DDP分布式训练（PyTorch+GPU） 示例：创建DDP分布式训练（PyTorch+NPU） 父主题：

查看更多 →

HDFS文件系统上，Hive所有的数据操作也都是通过Hadoop HDFS接口进行的。 Hive与MapReduce组件的关系 Hive的数据计算依赖于MapReduce。MapReduce也是Apache的Hadoop项目的子项目，它是一个基于Hadoop HDFS分布式并行计算框架。Hive进行数据分

查看更多 →

创建缓存刷新预热任务 场景描述 本章节指导用户通过API创建缓存刷新、预热任务，API的调用方法请参见如何调用API。 涉及API 当您使用Token认证方式完成认证鉴权时，需要获取用户Token并在调用接口时增加“X-Auth-Token”到业务接口请求消息头中。 创建预热缓存任务：将源站资源预热到CDN节点。

查看更多 →

缓存键来区分缓存。 HTTP参数 根据HTTP响应码和缓存时长来决定是否缓存，以及缓存的有效时间。 如果不配置HTTP参数，那么HTTP响应码默认值为200，取值范围：200-599。缓存时长默认值为300s，取值范围：1s~720000s。 缓存策略模式 网关通过客户端请求中的

查看更多 →

缓存实例状态说明 表1 缓存实例状态说明 状态 说明 CREATING 申请缓存实例后，在缓存实例状态进入运行中之前的状态。 CREATEFAILED 缓存实例处于创建失败的状态。 RUNNING 缓存实例正常运行状态。 在这个状态的实例可以运行您的业务。 ERROR 缓存实例处于故障的状态。

查看更多 →

，删除不需要的缓存规则。 单击“确定”，完成缓存规则配置。 如果您修改了缓存规则： 新的规则仅对后面缓存的资源生效，已经缓存的资源需要等缓存过期后，再次缓存才会遵循新的缓存规则。 如果您想要立即生效，请在修改缓存规则后执行缓存刷新操作。 配置示例 配置场景1：有一个门户网站，配置了华为云CDN加速，客户希望不缓存首页

查看更多 →

配置 域名 共享缓存组 如果不同域名对应相同的资源，您可以配置共享缓存组，将一个域名设置为主域名，组内其他域名共享该域名的缓存，以提高缓存命中率。 注意事项 域名加入共享缓存组后，共享主域名的缓存资源，如果主域名的资源未在CDN节点缓存，可能会导致客户端请求大量回源，占用源站带宽，请慎重选择加入共享缓存组。

查看更多 →

Server在开启分布式事务的时候已经启动MSDTC，其他 服务器 请参考设置 远程服务器 MSDTC（分布式事务处理协调器）进行启动。 更多介绍请参见Microsoft SQL Server官网MS DTC 分布式事务介绍。 使用限制 新实例默认开启分布式事务。 只读实例不支持分布式事务。 分布式事务功能一旦开启，将不允许关闭。

查看更多 →

分布式身份（公测） 概述 分布式身份(DID)管理 可验证凭证(VC)管理 父主题： 区块链 中间件接口

查看更多 →

不支持使用VBD磁盘模式挂载磁盘。磁盘标识为wwn号。 适用场景 大规模并行处理 (MPP) 数据仓库 MapReduce和Hadoop分布式计算 分布式文件系统 网络文件系统、日志或数据处理应用 规格 表2 M7型 弹性云服务器 的规格 规格名称 vCPU 内存 （GiB） 最大带宽/基准带宽

查看更多 →

MRS 支持什么类型的分布式存储？ 问： MRS集群支持什么类型的分布式存储？有哪些版本？ 答： MRS集群内使用主流的大数据Hadoop，目前支持Hadoop 3.x版本，并且随集群演进更新版本。 同时MRS也支持用户将数据存储在OBS服务中，使用MRS集群仅作数据计算处理的存算分离模式。

查看更多 →

请务必确保您的账户下已在分布式缓存服务（DCS）里创建了Redis类型的缓存实例。 如何创建Redis类型的缓存实例，请参考《分布式缓存服务用户指南》中“申请Redis缓存实例”章节。 该场景作业需要运行在 DLI 的独享队列上，因此要与DCS集群建立跨源连接，且用户可以根据实际所需设置相应安全组规则。 如何建

查看更多 →

请务必确保您的账户下已在分布式缓存服务（DCS）里创建了Redis类型的缓存实例。 如何创建Redis类型的缓存实例，请参考《分布式缓存服务用户指南》中“申请Redis缓存实例”章节。 该场景作业需要运行在DLI的独享队列上，因此要与DCS集群建立跨源连接，且用户可以根据实际所需设置相应安全组规则。 如何建

查看更多 →