基本概念 AI引擎 可支持用户进行机器学习、深度学习、模型训练作业开发的框架，如Tensorflow、Spark MLlib、MXNet、PyTorch、华为自研AI框架MindSpore等。 数据集 某业务下具有相同数据格式的数据逻辑集合。 特征操作 特征操作主要是对数据集进行特征处理。

查看更多 →

集成主流深度学习框架，包括PyTorch，TensorFlow，Jittor，PaddlePaddle等，内置经典网络结构并支持用户自定义上传网络，同时，针对遥感影像多尺度、多通道、多载荷、多语义等特征，内置遥感解译专用模型，支持用户进行预训练和解译应用。 图18 部分深度学习模型参数

查看更多 →

自动学习为什么训练失败？ 当自动学习项目训练失败时，请根据如下步骤排除问题。 进入当前账号的费用中心，检查是否欠费。 是，建议您参考华为云账户充值，为您的账号充值。 否，执行2。 检查存储图片数据的OBS路径。是否满足如下要求： 此OBS目录下未存放其他文件夹。 文件名称中无特殊

查看更多 →

职业认证考试的学习方法 华为云职业认证 提供在线学习/导师面授+在线测试+真实环境实践，理论与实践结合的学习模式，帮助您轻松通过认证。 您可以通过如下途径进行职业认证的学习： 进入华为云开发者学堂职业认证，按照页面指引在线学习认证课程。 在HALP处报名认证培训课程，由专业导师进行面授培训。

查看更多 →

在哪里可以进行课程学习？ 开发者认证订单支付完成后，点击“返回我的云市场”，回到“我的开发者认证”个人中心，进行对应开发者认证学习。如图1 图1 进入课程学习-返回我的云市场 您也可以到华为云开发者学堂右上方的“个人中心”，选择“我的开发者认证”，进行对应开发者认证学习。如图2 图2

查看更多 →

可信联邦学习作业管理 新建联邦学习作业 获取横向联邦学习作业详情 获取纵向联邦作业详情 保存纵向联邦作业 保存横向联邦学习作业 查询联邦学习作业列表 查询特征选择执行结果 删除联邦学习作业 执行横向联邦学习作业 执行纵向联邦模型训练作业 父主题： 计算节点API

查看更多 →

自动学习训练作业失败 自动学习训练作业创建失败，一般是因为后台服务故障导致的，建议稍等片刻，然后重新创建训练作业。如果重试超过3次仍无法解决，请联系华为云技术支持。 自动学习训练作业创建成功，但是在运行过程中，由于一些故障导致作业运行失败，排查方式如下： 首次出现请检查您的账户是

查看更多 →

使用自动学习实现预测分析 准备预测分析数据 创建预测分析项目 训练预测分析模型 部署预测分析服务 父主题： 使用自动学习实现零代码AI开发

查看更多 →

配置SparkSQL的分块个数 配置场景 SparkSQL在进行shuffle操作时默认的分块数为200。在数据量特别大的场景下，使用默认的分块数就会造成单个数据块过大。如果一个任务产生的单个shuffle数据块大于2G，该数据块在被fetch的时候还会报类似错误： Adjusted

查看更多 →

TOPS 机器学习、深度学习、训练推理、科学计算、地震分析、计算金融学、渲染、多媒体编解码。 支持开启/关闭超线程功能，详细内容请参见开启/关闭超线程。 推理加速型 Pi1 NVIDIA P4（GPU直通） 2560 5.5TFLOPS 单精度浮点计算 机器学习、深度学习、训练推理、

查看更多 →

支持在分布式的、信任边界缺失的多个参与方之间建立互信空间； 实现跨组织、跨行业的多方数据融合分析和多方联合学习建模。 灵活多态 支持对接主流数据源（如 MRS 、 DLI 、 RDS、 Oracle等）的联合数据分析； 支持对接多种深度学习框架( TICS ，TensorFlow)的联邦计算； 支持控制流和数据流的分离

查看更多 →

IoTA.01010204 资产树深度超过配额限制 错误码描述 资产树深度超过配额限制。 可能原因 每棵资产树深度最大不超过10层。 处理建议 请检查资产树的深度是否超过10层，若超出限制，请调整资产树的建模关系保证总深度不超过10层。 父主题： 资产建模相关错误码

查看更多 →

主机深度采集成功，部分采集规格信息缺失 问题描述 进行主机深度采集后，在资源详情中查看采集的基本信息和规格信息，发现存在部分信息缺失的情况。 问题分析 出现该问题，可能是在安装Edge主机上的Linux采集脚本时，UNIX换行符格式不正确。正常情况下，Linux系统使用“LF”作

查看更多 →

enabled为true时）shuffle分区的咨询大小（单位：字节），在Spark聚合小shuffle分区或拆分倾斜的shuffle分区时生效。 64MB spark.sql.adaptive.fetchShuffleBlocksInBatch 是否批量取连续的shuffle块。对于同一个m

查看更多 →

enabled为true时）shuffle分区的咨询大小（单位：字节），在Spark聚合小shuffle分区或拆分倾斜的shuffle分区时生效。 64MB spark.sql.adaptive.fetchShuffleBlocksInBatch 是否批量取连续的shuffle块。对于同一个m

查看更多 →

磁盘，提升shuffle效率。 开启spark.shuffle.service.enabled=true，启动shuffle服务，提升任务shuffle的稳定性。 配置项 集群默认值 调整后 --conf spark.shuffle.readHostLocalDisk false

查看更多 →

coalesce(numPartitions: Int, shuffle: Boolean = false) 当shuffle为true的时候，函数作用与repartition(numPartitions: Int)相同，会将数据通过Shuffle的方式重新分区；当shuffle为false的时候，则只是简单

查看更多 →

apache.spark.shuffle.hash.HashShuffleReader.read(HashShuffleReader.scala:102) at org.apache.spark.rdd.ShuffledRDD.compute(ShuffledRDD.scala:90)

查看更多 →

在哪里可以进行课程学习？ 订单支付完成后，点击“返回我的云市场”，回到“我的微认证”个人中心，进行对应微认证学习。如图1。 图1 进入课程学习-返回我的云市场 您也可以到华为云开发者学堂右上方的“个人中心”，选择“我的微认证”，进行对应微认证学习。如图2。 图2 进入课程学习-我的微认证

查看更多 →

存储费用：自动学习作业的数据通过 对象存储服务 （OBS）上传或导出，存储计费按照OBS的计费规则。 综上，运行自动学习作业的费用 = 计算资源费用（2.43 元） + 存储费用 示例：使用专属资源池运行自动学习作业。计费项：标准存储费用 假设用户于2023年4月1日创建了自动学习的图像分

查看更多 →

执行横向联邦学习作业 功能介绍 执行横向联邦学习作业 调用方法 请参见如何调用API。 URI POST /v1/{project_id}/leagues/{league_id}/fl-jobs/{job_id}/execute 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →