小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

小文件优化 操作场景 Spark SQL表中，经常会存在很多小文件（大小远小于HDFS的块大小），每个小文件默认对应Spark中的一个Partition，即一个Task。在有很多小文件时，Spark会启动很多Task，此时当SQL逻辑中存在Shuffle操作时，会大大增加hash分桶数，严重影响系统性能。

查看更多 →

优化小文件场景下的Spark SQL性能 配置场景 Spark SQL的表中，经常会存在很多小文件（大小远小于HDFS块大小），每个小文件默认对应Spark中的一个Partition，也就是一个Task。在很多小文件场景下，Spark会起很多Task。当SQL逻辑中存在Shuff

查看更多 →

优化小文件场景下的Spark SQL性能 配置场景 Spark SQL的表中，经常会存在很多小文件（大小远小于HDFS块大小），每个小文件默认对应Spark中的一个Partition，也就是一个Task。在很多小文件场景下，Spark会起很多Task。当SQL逻辑中存在Shuff

查看更多 →

效果评估 创建效果评估可以对服务设置指标，查看推荐效果的反馈，可以根据系统提供的指标添加。 创建效果评估作业 登录RES管理控制台，在左侧导航栏中选择“推荐业务>智能场景”，默认进入“智能场景”列表。 在智能场景列表中，单击“运行中”状态的目标场景名称，进入详情页。 单击“效果评

查看更多 →

效果展示 在圆桌验证应用构建效果。 操作步骤 进入圆桌首页，在页面右上角单击个人头像，选择“个人信息”，进入个人团队详情页。 在“设置”页签左侧栏选择“选择应用”，在“租户内模板”查找“活动通知与反馈”业务流，单击“操作”列。事件流会自动添加到“已选应用”页签内。 租户内模板中只

查看更多 →

量集是一个excel文件，每行数据是需要输入的变量值信息，可以通过“导入”功能进行上传。 图1 效果预览 单击“查看效果”，输出模型回复结果，用户可以基于预览的效果调整提示词文本和变量。 父主题： 撰写提示词

查看更多 →

查询效果指标 功能介绍 该接口用于查询推荐效果指标。 URI GET /v1/{project_id}/query-indicators/{job_id} 参数说明请参见表1。 表1 URI参数说明 名称 是否必选 类型 说明 project_id 是 String 项目编号，用

查看更多 →

效果评估 创建效果评估可以对线上服务设置指标，查看推荐效果的反馈，可以根据系统提供的指标添加。 表1 效果评估参数说明 参数名称 说明 名称 自定义名称，由中文、英文、数字、下划线、空格或者中划线组成，并且不能以空格开始和结束，长度为1~64个字符。 描述 对于该效果评估作业的描述信息。

查看更多 →

迁移效果校验 在pipeline适配完成后，需要验证适配后的效果是否满足要求，通过对比原始onnx pipeline的最终输出结果确认迁移效果。如果精度和性能都没有问题，则代表迁移完成。 对比图片生成效果 在CPU上推理onnx，将原始onnx和适配完成的MindSpore Lite

查看更多 →

如何合并小文件 使用SQL过程中，生成的小文件过多时，会导致作业执行时间过长，且查询对应表时耗时增大，建议对小文件进行合并。 设置配置项。 spark.sql.shuffle.partitions = 分区数量（即此场景下最终生成的文件数量） 执行SQL。 INSERT OVERWRITE

查看更多 →

GET /v1.0/cdn/domains cdn:configuration:queryDomainList - POST /v1.0/cdn/domains cdn:configuration:createDomains - DELETE /v1.0/cdn/domains/{domain_id}

查看更多 →

效果评估 创建效果评估可以对线上服务设置指标，查看推荐效果的反馈，可以根据系统提供的指标添加。 创建效果评估 创建效果评估步骤如下： 在“离线作业”的“效果评估”页签，单击左上方“创建”，进入“创建效果评估”页面。 在“创建效果评估”页面，填写特征工程“名称”、“场景”和“描述”。

查看更多 →

适用于有加速需求的网站，对网站中图片、小文件等静态资源提供加速服务，包括门户网站、电商平台、资讯APP、UGC应用（User Generated Content，用户原创内容）等。CDN网络能够对加速 域名 下的静态资源提供良好的加速服务，支持通过自定义缓存规则控制文件在CDN节点的缓存过期时间，缓

查看更多 →

提交效果评估任务 功能介绍 该接口用于提交推荐效果评估任务。 URI POST /v1/{project_id}/evaluate 参数说明请参见表1。 表1 URI参数说明 名称 是否必选 类型 说明 project_id 是 String 项目编号，用于资源隔离。获取方法请参见获取项目ID。

查看更多 →

横向比较提示词效果 设置候选提示词 横向比较提示词效果 父主题： 开发盘古大模型提示词工程

查看更多 →

接入CDN后，访问速度仍然很慢 问题现象 接入CDN加速后，用户访问网站或者APP资源依然很慢。 排查思路 域名是否接入CDN加速 是否命中CDN缓存 是否跨运营商和跨省 缓存规则设置是否合理 加速资源是否预热 是否客户端网络问题 检查是否存在跨境访问 排查步骤 检查域名是否接入CDN加速

查看更多 →

事件处理效果预览 “事件”是指用户在客户端查看智能短信时，通过与子组件交互可完成的客户端操作。比如手机用户点击短信中的“进入官网”按钮，即可访问官网。 如您需要在预览模板时查询模板绑定的事件处理效果，这一需求可通过调用PreviewService函数统一处理事件来实现。目前ite

查看更多 →

Network，内容分发网络）是通过将源站内容分发至靠近用户的加速节点，使用户可以就近获得所需的内容，解决Internet网络拥挤的状况，提高用户访问的响应速度和成功率，从而提升您业务的使用体验。 您可以在CDN管理控制台添加加速域名，然后前往域名服务商处配置CNAME解析，即可启用CDN加速

查看更多 →

成功添加加速域名以后，您可以根据业务需要配置缓存规则、智能压缩、安全加速等，提高缓存命中率、优化加速效果、提升安全性。 提高缓存命中率、优化加速效果 使用场景 配置项 说明 缓存命中率低、加速效果不明显 配置缓存规则 合理配置不同资源的缓存过期时间和优先级，能有效提升缓存命中率，降低回源率，减轻源站压力。

查看更多 →

使用Spark小文件合并工具说明 工具介绍 在Hadoop大规模生产集群中，由于HDFS的元数据都保存在NameNode的内存中，集群规模受制于NameNode单点的内存限制。如果HDFS中有大量的小文件，会消耗NameNode大量内存，还会大幅降低读写性能，延长作业运行时间。因

查看更多 →