华为云11.11 AI&大数据分会场

高精度,多场景,快响应,AI&大数据助力企业降本增效

 
 

    机器学习模型调优 更多内容
  • 数据倾斜调优

    数据倾斜 数据倾斜问题是分布式架构的重要难题,它破坏了MPP架构中各个节点对等的要求,导致单节点(倾斜节点)所存储或者计算的数据量远大于其他节点,所以会造成以下危害: 存储上的倾斜会严重限制系统容量,在系统容量不饱和的情况下,由于单节点倾斜的限制,使得整个系统容量无法继续增长。

    来自:帮助中心

    查看更多 →

  • CarbonData调优思路

    CPU核数约等于: 并行任务数x扫描仪线程数。其中并行任务数为分割数和执行器数x执行器核数两者之间的较小值。 数据加载性能 数据加载性能与查询性能差异很大。跟查询性能一样,数据加载性能也取决于可达到的并行性。在数据加载情况下,工作线程的数量决定并行的单元。因此,更多的

    来自:帮助中心

    查看更多 →

  • 智能调优概览

    网络环境监控”,单击“查看详情”,跳转至智能首页。 在右上方单击,设置智能概览的时间窗。 查看首页。 收益 单击“全部”,可以查看当前时间窗口内调前后干扰率、下行带宽/上行带宽和漫游成功率收益对比。 单击“容量”,可以查看当前时间窗口内容量前后上行带宽、下行带宽、流量收益对比。

    来自:帮助中心

    查看更多 →

  • SQL调优指南

    经验总结:SQL语句改写规则 SQL关键参数调整 使用Plan Hint进行 使用向量化执行引擎进行 父主题: 性能

    来自:帮助中心

    查看更多 →

  • SQL调优指南

    据库设计。 Query执行流程 SQL执行计划介绍 优流程 更新统计信息 审视和修改表定义 典型SQL优点 经验总结:SQL语句改写规则 SQL关键参数调整 使用Plan Hint进行 检查隐式转换的性能问题 使用SQL PATCH进行 实际案例

    来自:帮助中心

    查看更多 →

  • 实际调优案例

    实际案例 案例:选择合适的分布列 案例:建立合适的索引 案例:增加JOIN列非空条件 案例:使排序下推 案例:设置cost_param对查询性能优化 案例:调整局部聚簇键 案例:调整中间表存储方式 案例:改建分区表 案例:调整GUC参数best_agg_plan 案例:改写SQL消除子查询(案例1)

    来自:帮助中心

    查看更多 →

  • 实际调优案例

    案例:调整基于代价的查询重写GUC参数costbased_rewrite_rule 案例:使用DN Gather减少计划中的Stream节点 案例:使用全局二级索引加速查询 父主题: SQL指南

    来自:帮助中心

    查看更多 →

  • 总体调优思路

    此,业务上线后,当性能操作需要重启集群时,操作窗口时间需向管理部门提出申请,经批准后方可执行。 优流程 优流程如图1所示。 图1 GaussDB 性能优流程 各阶段说明,如表1所示。 表1 GaussDB性能优流程说明 阶段 描述 确定性能范围 获取集群各节点的

    来自:帮助中心

    查看更多 →

  • 批量仿真调优

    图如图2所示。 图2 调度节点 这样某一台机器工作,其他3台机器资源会空闲,造成资源浪费。因此建议批量仿真时,尽量增大批量仿真的子任务数(与被测场景数量有关),使得集群节点内的所有机器资源被充分利用,减少机器空闲状态。 父主题: 仿真服务

    来自:帮助中心

    查看更多 →

  • 在ModelArts Studio基于Llama3-8B模型实现新闻自动分类

    模型创建成功后,在我的模型列表,单击操作列的“更多 > ”,进入创建作业页面。 在创建作业页面,配置参数。 由于需要分析模型效果,需要创建多个任务,不同调任务的参数值配置请参见表2和表3。 表2 创建任务 参数 说明 取值样例 任务设置 任务名称 自定义任务名称。

    来自:帮助中心

    查看更多 →

  • 语句下推调优

    store_sales; 其执行计划为: 可见函数func_percent_1被下推到DN执行,提升了执行效率(TPCDS 1000X,3CN18DN,查询效率提升100倍以上)。 实例分析2:使排序下推 请参考案例:使排序下推。 父主题: SQL进阶

    来自:帮助中心

    查看更多 →

  • 语句下推调优

    语句下推 语句下推介绍 目前,GaussDB优化器在分布式框架下制定语句的执行策略时,有三种执行计划方式:生成下推语句计划、生成分布式执行计划、生成发送语句的分布式执行计划。 下推语句计划:指直接将查询语句从CN发送到DN进行执行,然后将执行结果返回给CN。 分布式执行计划:

    来自:帮助中心

    查看更多 →

  • 语句下推调优

    语句下推 语句下推介绍 目前,GaussDB优化器在分布式框架下制定语句的执行策略时,有三种执行计划方式:生成下推语句计划、生成分布式执行计划、生成发送语句的分布式执行计划。 下推语句计划:指直接将完整的查询语句从CN发送到DN进行执行,然后将执行结果返回给CN。 分布式执行

    来自:帮助中心

    查看更多 →

  • 语句下推调优

    store_sales; 其执行计划为: 可见函数func_percent_1被下推到DN执行,提升了执行效率(TPCDS 1000X,3CN18DN,查询效率提升100倍以上)。 实例分析2:使排序下推 请参考案例:使排序下推。 父主题: SQL进阶

    来自:帮助中心

    查看更多 →

  • 语句下推调优

    语句下推 语句下推介绍 目前,GaussDB优化器在分布式框架下制定语句的执行策略时,有三种执行计划方式:生成下推语句计划、生成分布式执行计划、生成发送语句的分布式执行计划。 下推语句计划:指直接将完整的查询语句从CN发送到DN进行执行,然后将执行结果返回给CN。 分布式执行

    来自:帮助中心

    查看更多 →

  • 子查询调优

    子查询 子查询背景介绍 应用程序通过SQL语句来操作数据库时会使用大量的子查询,这种写法比直接对两个表做连接操作在结构上和思路上更清晰,尤其是在一些比较复杂的查询语句中,子查询有更完整、更独立的语义,会使SQL对业务逻辑的表达更清晰更容易理解,因此得到了广泛的应用。 Gaus

    来自:帮助中心

    查看更多 →

  • 子查询调优

    子查询 子查询背景介绍 应用程序通过SQL语句来操作数据库时会使用大量的子查询,这种写法比直接对两个表做连接操作在结构上和思路上更清晰,尤其是在一些比较复杂的查询语句中,子查询有更完整、更独立的语义,会使SQL对业务逻辑的表达更清晰更容易理解,因此得到了广泛的应用。 Gaus

    来自:帮助中心

    查看更多 →

  • 子查询调优

    子查询 子查询背景介绍 应用程序通过SQL语句来操作数据库时会使用大量的子查询,这种写法比直接对两个表做连接操作在结构上和思路上更清晰,尤其是在一些比较复杂的查询语句中,子查询有更完整、更独立的语义,会使SQL对业务逻辑的表达更清晰更容易理解,因此得到了广泛的应用。 Gaus

    来自:帮助中心

    查看更多 →

  • 子查询调优

    子查询 子查询背景介绍 应用程序通过SQL语句来操作数据库时会使用大量的子查询,这种写法比直接对两个表做连接操作在结构上和思路上更清晰,尤其是在一些比较复杂的查询语句中,子查询有更完整、更独立的语义,会使SQL对业务逻辑的表达更清晰更容易理解,因此得到了广泛的应用。 Gaus

    来自:帮助中心

    查看更多 →

  • 算子级调优

    算子级 算子级介绍 一个查询语句要经过多个算子步骤才会输出最终的结果。由于个别算子耗时过长导致整体查询性能下降的情况比较常见。这些算子是整个查询的瓶颈算子。通用的优化手段是EXPLAIN ANALYZE/PERFORMANCE命令查看执行过程的瓶颈算子,然后进行针对性优化。

    来自:帮助中心

    查看更多 →

  • 算子级调优

    算子级 算子级介绍 一个查询语句要经过多个算子步骤才会输出最终的结果。由于个别算子耗时过长导致整体查询性能下降的情况比较常见。这些算子是整个查询的瓶颈算子。通用的优化手段是EXPLAIN ANALYZE/PERFORMANCE命令查看执行过程的瓶颈算子,然后进行针对性优化。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了