中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    优化递归数据栈 更多内容
  • 优化udev配置

    优化udev配置 删除“/etc/udev/rules.d/70-persistent-net.rules”配置文件。 父主题: 安全性配置

    来自:帮助中心

    查看更多 →

  • Bulk聚合优化

    Bulk聚合优化 通过指定配置项“index.aggr_perf_batch_size”开启或关闭批量导入优化。开启批量后bulk请求中的doc从单个依次写入变为批量写入,能有效减少内存申请、锁申请、及其他调用开销,从而提升数据导入性能。 “index.aggr_perf_batch_size”取值范围为[1

    来自:帮助中心

    查看更多 →

  • 小文件优化

    小文件优化 操作场景 Spark SQL表中,经常会存在很多小文件(大小远小于HDFS的块大小),每个小文件默认对应Spark中的一个Partition,即一个Task。在有很多小文件时,Spark会启动很多Task,此时当SQL逻辑中存在Shuffle操作时,会大大增加hash分桶数,严重影响系统性能。

    来自:帮助中心

    查看更多 →

  • 小文件优化

    小文件优化 操作场景 Spark SQL表中,经常会存在很多小文件(大小远小于HDFS的块大小),每个小文件默认对应Spark中的一个Partition,即一个Task。在有很多小文件时,Spark会启动很多Task,此时当SQL逻辑中存在Shuffle操作时,会大大增加hash分桶数,严重影响系统性能。

    来自:帮助中心

    查看更多 →

  • 合并CBO优化

    合并CBO优化 操作场景 Spark SQL默认支持基于规则的优化,但仅仅基于规则优化不能保证Spark选择合适的查询计划。CBO(Cost-Bsed Optimizer)是一种为SQL智能选择查询计划的技术。通过配置开启CBO后,CBO优化器可以基于表和列的统计信息,进行一系列的估算,最终选择出合适的查询计划。

    来自:帮助中心

    查看更多 →

  • 业务优化建议

    业务优化建议 场景描述 您可以根据终端用户的按键轨迹和按键次数等,给出对当前IVR流程的优化建议,可以用作优化流程的参考。 前提条件 您必须具有“IVR分析 > 业务优化建议”的菜单权限。 您的租间需开启IVR分析特性、智能IVR特性。 被分析的机器人流程需存在接入码。 被分析机

    来自:帮助中心

    查看更多 →

  • 成本优化概览

    成本优化概览 用户使用成本优化工具,可以优化部分云资源实例的使用,达到节省成本的目的。 成本优化概览 用户可以查看当前所有的成本优化建议,根据实际情况选择需要优化的场景。 登录“成本中心”。 选择“成本优化”。 在汇总区域,可以查看到所有成本优化建议的汇总数据。 参数 说明 数据覆盖成本范围

    来自:帮助中心

    查看更多 →

  • 调用栈记录函数

    调用记录函数 GaussDB (DWS)通过pv_memory_profiling(type int)和环境变量MALLOC_CONF,控制malloc等内存分配调用记录模块开启关闭、以及内存调用输出等,使用流程如下图所示: MALLOC_CONF 环境变量MALLOC_CO

    来自:帮助中心

    查看更多 →

  • 部署资源栈集

    部署资源集 功能介绍 部署资源集(DeployStackSet) 此API用于部署一个已有的资源集,并返回资源集操作ID(stack_set_operation_id) 用户可以使用此API更新资源集的模板、参数并进行部署。 此API会直接触发资源实例部署。用户既可以

    来自:帮助中心

    查看更多 →

  • 删除资源栈集

    删除资源集 功能介绍 删除资源集(DeleteStackSet) 请谨慎操作,删除资源集将会删除与该资源集相关的所有数据,如:资源集操作、资源集操作事件等。 当且仅当指定的资源集满足以下所有条件时,资源集才能被成功删除,否则会报错: 资源集下没有资源实例 资源栈集状态处于空闲(IDLE)状态

    来自:帮助中心

    查看更多 →

  • 更新资源栈实例

    用户只能覆盖已经在资源集中记录的参数,如果用户想要增加可以覆盖的参数,需要先通过DeployStackSet API更新资源集记录的参数集合。 当触发的部署失败时,资源实例不会自动回滚参数覆盖,但部署失败的资源会默认自动回滚,已经部署成功的资源不会触发回滚。 用户可以根据资源集操作I

    来自:帮助中心

    查看更多 →

  • 优化数据倾斜场景下的Spark SQL性能

    能低;另一方面,数据量少的Task在运行完成后,导致很多CPU空闲,造成CPU资源浪费。 通过如下配置项可开启自动进行数据倾斜处理功能,通过将Hash分桶后数据量很大的、且超过数据倾斜阈值的分桶拆散,变成多个task处理一个桶的数据机制,提高CPU资源利用率,提高系统性能。 未产

    来自:帮助中心

    查看更多 →

  • 大数据优化与提升服务怎么收费的?

    数据优化与提升服务怎么收费的? 大数据优化与提升服务为一次性计费产品。 父主题: 关于服务购买

    来自:帮助中心

    查看更多 →

  • 优化数据倾斜场景下的Spark SQL性能

    能低;另一方面,数据量少的Task在运行完成后,导致很多CPU空闲,造成CPU资源浪费。 通过如下配置项可开启自动进行数据倾斜处理功能,通过将Hash分桶后数据量很大的、且超过数据倾斜阈值的分桶拆散,变成多个task处理一个桶的数据机制,提高CPU资源利用率,提高系统性能。 未产

    来自:帮助中心

    查看更多 →

  • Doris UDF开发规范

    UDF开发规则 UDF中方法调用必须是线程安全的。 UDF实现中禁止读取外部大文件到内存中,如果文件过大可能会导致内存耗尽。 需避免大量递归调用,否则容易造成溢出或oom。 需避免不断创建对象或数组,否则容易造成内存耗尽。 Java UDF应该捕获和处理可能发生的异常,不能将异常给服务

    来自:帮助中心

    查看更多 →

  • 调用栈记录函数

    调用记录函数 GaussDB(DWS)通过pv_memory_profiling(type int)和环境变量MALLOC_CONF,控制gaussdb进程中malloc等内存分配调用记录模块开启关闭、以及进程级内存调用输出等,使用流程如下图所示: MALLOC_CONF

    来自:帮助中心

    查看更多 →

  • 开通优化顾问服务

    开通优化顾问服务 开通优化顾问前请先 注册华为账号 并开通华为云。 登录华为云管理控制台。 选择“服务列表 > 管理与监管 > 优化顾问”,进入优化顾问服务页面。 勾选“我已阅读并同意《优化顾问服务声明》”选项,然后单击“确定”。 “云资源访问授权”和“检查结果访问授权”全部选择后单击“确定授权”,即可使用优化顾问。

    来自:帮助中心

    查看更多 →

  • 资源监控与优化

    针对云上资源的告警情况、负载情况和健康情况进行检查。从监控的角度分析业务场景和历史故障,结合华为云运维最佳实践,提供针对性的优化建议。 资源监控与优化包括: 基础资源监控,提供基于华为云CES(云监控)的云资源指标及事件监控的配置建议。 应用&容器监控,提供基于华为云AOM(应用

    来自:帮助中心

    查看更多 →

  • 业务体验优化策略

    业务体验优化策略 配置流量分配 配置QoS策略 配置智能选路策略 父主题: 部署指导

    来自:帮助中心

    查看更多 →

  • 优化器方法配置

    优化器方法配置 这些配置参数提供了影响查询优化器选择查询规划的原始方法。如果优化器为特定的查询选择的缺省规划并不是最优的,可以通过使用这些配置参数强制优化器选择一个不同的规划来临时解决这个问题。更好的方法包括调节优化器开销常量、手动运行ANALYZE、增加配置参数default_

    来自:帮助中心

    查看更多 →

  • 基因查询优化器

    基因查询优化器 介绍基因查询优化器相关的参数。基因查询优化器(GEQO)是一种启发式的查询规划算法。这个算法减少了对复杂查询规划的时间,而且生成规划的开销有时也小于正常的详尽的查询算法。 geqo 参数说明:控制基因查询优化的使用。 参数类型:USERSET 取值范围:布尔型 on表示使用。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了