赞奇超高清云工作站解决方案实践

表设计 总体上讲，良好的表设计需要遵循以下原则： 减少需要扫描的数据量。通过分区表的剪枝机制可以大幅减少数据的扫描量。 尽量减少随机I/O。通过聚簇可以实现热数据的连续存储，将随机I/O转换为连续I/O，从而减少扫描的I/O代价。 选择分区方案 当表中的数据量很大时，应当对表进行分区，一般需要遵循以下原则：

查看更多 →

约束设计 DEFAULT和NULL约束 如果能够从业务层面补全字段值，那么，不建议使用DEFAULT约束，避免数据加载时产生不符合预期的结果。 给明确不存在NULL值的字段加上NOT NULL约束。优化器会在特定场景下对其进行自动优化。 给可以显式命名的约束显式命名。除了NOT

查看更多 →

约束设计 DEFAULT和NULL约束 【建议】如果能够从业务层面补全字段值，那么，就不建议使用DEFAULT约束，避免数据加载时产生不符合预期的结果。 【建议】给明确不存在NULL值的字段加上NOT NULL约束，优化器会在特定场景下对其进行自动优化。 【建议】给可以显式命名的约束显式命名。除了NOT

查看更多 →

设计Runbook Runbook设计原则 Runbook角色设计 Runbook Checklist设计 Runbook操作步骤设计 Runbook参考模板 父主题： 应用迁移上云

查看更多 →

用子账号进行创建的，需要参考配置CCE集群子账号权限。 创建可信联邦学习训练型作业 用户登录进入计算节点页面。 在左侧导航树上依次选择“作业管理 > 可信联邦学习”，打开可信联邦学习作业页面。 在“可信联邦学习”页面，单击“创建”。 图1 创建作业 在弹出的对话框中配置作业名称相关参数，完成后单击“确定”。

查看更多 →

SFT微调权重转换 微调训练前需将HuggingFace格式权重转换为Megatron格式后再进行SFT微调训练。 本章节主要介绍如何将HuggingFace权重转换为Megatron格式。此处的HuggingFace权重文件和转换操作结果同时适用于SFT微调和LoRA微调训练。

查看更多 →

训练的权重转换说明 以llama2-13b举例，使用训练作业运行obs_pipeline.sh脚本后，脚本自动执行权重转换，并检查是否已经完成权重转换的过程。 如果已完成权重转换，则直接执行训练任务。如果未进行权重转换，则会自动执行scripts/llama2/2_convert_mg_hf

查看更多 →

训练的权重转换说明 以llama2-13b举例，使用训练作业运行obs_pipeline.sh脚本后，脚本自动执行权重转换，并检查是否已经完成权重转换的过程。 如果已完成权重转换，则直接执行训练任务。如果未进行权重转换，则会自动执行scripts/llama2/2_convert_mg_hf

查看更多 →

训练的权重转换说明 以llama2-13b举例，使用训练作业运行obs_pipeline.sh脚本后，脚本自动执行权重转换，并检查是否已经完成权重转换的过程。 如果已完成权重转换，则直接执行训练任务。如果未进行权重转换，则会自动执行scripts/llama2/2_convert_mg_hf

查看更多 →

我的自学课程操作 登录用户平台。 单击顶部菜单栏的学习任务菜单。 进入学习任务页面，单击【自学课程】菜单 进入我的自学课程页面，卡片形式展示我学习和我收藏的课程信息。 图5 我的自学课程 单击【课程卡片】，弹出课程的详情页面，可以查看课程的详细信息开始课程的学习。 父主题： 实施步骤

查看更多 →

量训练时，需要传入此权重文件。 train_from_scratch false 用于指示模型是否从头开始训练，如果true模型将从一个全新的初始状态开始训练则不加载权重。【true or false】，默认false do_train true 指示脚本执行训练步骤，用来控制是

查看更多 →

量训练时，需要传入此权重文件。 train_from_scratch false 用于指示模型是否从头开始训练，如果true模型将从一个全新的初始状态开始训练则不加载权重。【true or false】，默认false do_train true 指示脚本执行训练步骤，用来控制是

查看更多 →

BF16：具有8个指数位和7个小数位。在处理大模型时有优势，能够避免在训练过程中数值的上溢或下溢，从而提供更好的稳定性和可靠性，在大模型训练和推理以及权重存储方面更受欢迎。 FP16：用于深度学习训练和推理过程中，可以加速计算并减少内存的占用，对模型准确性的影响在大多数情况下较小。与BF16相比在处理非常大或非常

查看更多 →

BF16：具有8个指数位和7个小数位。在处理大模型时有优势，能够避免在训练过程中数值的上溢或下溢，从而提供更好的稳定性和可靠性，在大模型训练和推理以及权重存储方面更受欢迎。 FP16：用于深度学习训练和推理过程中，可以加速计算并减少内存的占用，对模型准确性的影响在大多数情况下较小。与BF16相比在处理非常大或非常

查看更多 →

无 神经元的初始值权重初始化为均值为0，方差为 Var(wi)=1/nin 的均匀分布（高斯或者随机分布）。其中 nin 是该神经元的输入数目。 表33 optimize_parameters 参数说明 参数名称 是否必选 参数类型 说明 梯度下降(grad) 学习率(learning_rate)

查看更多 →

基于权重的分流 ASM能够提供基于权重的流量控制，根据设定的权重值将流量分发给指定的版本。 控制台更新基于权重的分流 登录U CS 控制台，在左侧导航栏中单击“服务网格”。 单击服务网格名称，进入详情页。 在左侧导航栏，单击“服务中心”下的“网格服务”，进入服务列表。 单击服务名，进入服务详情页。

查看更多 →

OBS客户端初始化 日志初始化 请求对象 SDK公共结果对象 回调函数返回结果 Promise对象返回结果

查看更多 →

初始化 OpenEye_SDK(创建对象，并初始化) config(配置) 通知事件处理 通知事件 其他设置 父主题： 音频呼叫接口

查看更多 →

初始化 配置桶的CORS 配置密钥 创建OBS客户端 配置OBS客户端 配置SDK日志

查看更多 →

初始化 配置密钥 创建OBS客户端 配置OBS客户端 配置SDK日志 异步调用

查看更多 →

初始化 接口功能 该接口用于启动并且初始化SDK。注意事项：1、调用该接口之前请先修改HwmSdk文件夹下HwmSdk.exe文件的名称；2、该接口用于启动并初始化SDK，在调用其他接口之前必须先调用该接口并等待初始化回调结果；3、每次调用初始化接口会重新启动SDK，之前所有设置与操作将不复存在。

查看更多 →