中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    大数据案例 更多内容
  • 场景化实践案例

    场景化实践案例 电商平台业务监控 云监控在视频直播中的应用 云监控在众包平台中的应用 事件监控最佳实践 使用资源分组和告警功能上报指定资源的监控指标 配置 云服务器 全部挂载点磁盘使用率告警规则

    来自:帮助中心

    查看更多 →

  • 常用委托配置案例

    常用委托配置案例 分配委托权限(被委托方操作) 配置 弹性云服务器 E CS 委托

    来自:帮助中心

    查看更多 →

  • 实际调优案例

    实际调优案例 案例:选择合适的分布列 案例:建立合适的索引 案例:调整分布键 案例:调整GUC参数best_agg_plan 案例:改写SQL消除子查询 案例:改写SQL排除剪枝干扰 案例:改写SQL消除in-clause 案例:调整查询重写GUC参数rewrite_rule 案例:使用DN

    来自:帮助中心

    查看更多 →

  • 案例:使排序下推

    案例:使排序下推 在做场景性能测试时,发现某场景大部分时间是CN端在做window agg,占到总执行时间95%以上,系统资源不能充分利用。研究发现该场景的特点是:将两列分别求sum作为一个子查询,外层对两列的和再求和后做trunc,然后排序。可以尝试将语句改写为子查询,使排序下推。

    来自:帮助中心

    查看更多 →

  • 典型场景配置案例

    典型场景配置案例 权限典型场景一览 对当前账号下单个IAM用户授权 对当前账号下多个IAM用户或用户群组授权 对其他账号授权 对所有账号授权 临时授权访问OBS 让IAM用户只能看到被授权的桶 限制指定的IP地址访问桶

    来自:帮助中心

    查看更多 →

  • 实际调优案例

    实际调优案例 案例:调整查询重写GUC参数rewrite_rule 案例:建立合适的索引 案例:增加JOIN列非空条件 案例:改建分区表 案例:改写SQL消除子查询 案例:改写SQL消除in-clause 父主题: SQL调优指南

    来自:帮助中心

    查看更多 →

  • 迁移项目案例

    迁移项目案例 上海XX科技有限公司是XX全量搬迁到华为云的重点客户,完成应用和大数据等2核心业务和15个子系统全面上线华为云。 迁移调研分析 基础资源自动采集,自动化匹配目标端资源,确保源端资源无缝对接至目标环境的合适配置,完成千余项资源整合。 图1 迁移调研分析1 通过分析应

    来自:帮助中心

    查看更多 →

  • 案例:调整分布键

    983]。根据Scan的含义推测此计划性能问题的根源在于表s_riskrate_setting数据的分布倾斜。实际分析之后确实发现表s_riskrate_setting存在严重的数据倾斜。整改之后性能从94s提升为50s。 父主题: 实际调优案例

    来自:帮助中心

    查看更多 →

  • CodeArts Snap代码生成案例 - 数据库接口编写

    CodeArts Snap代码生成案例 - 数据库接口编写 MyBatis作为常见的数据库框架,经常涉及到大量的接口类生成,并且很多情况下这些接口类都具有类似的格式,因此在上文的基础上生成新的业务接口也是比较常见的代码生成场景。 根据注释生成数据库接口代码 对于类似的业务逻辑,可以直接生成对应的接口。

    来自:帮助中心

    查看更多 →

  • 基于Kafka的Word Count数据流统计案例

    基于Kafka的Word Count数据流统计案例 应用场景 Kafka是一个分布式的消息发布-订阅系统。它采用独特的设计提供了类似JMS的特性,主要用于处理活跃的流式数据。 Kafka有很多适用的场景:消息队列、行为跟踪、运维数据监控、日志收集、流处理、事件溯源、持久化日志等。

    来自:帮助中心

    查看更多 →

  • 大屏

    如图6所示,选择开发场景为“屏”,单击右侧区域的“开发”,进入到配置的AppCube屏开发环境。 图6 进入屏开发环境 如果使用系统默认提供开发环境,进入到默认环境的业务屏。 如果使用配置的开发环境,进入到配置的开发地址,配置的地址不是直接进入业务屏,参见下图进入业务屏。 如图7所示,单击“导入项目包”。

    来自:帮助中心

    查看更多 →

  • ModelArts入门实践

    Studio模型即服务平台(下面简称为MaaS),使用Llama3-8B模型框架实现新闻自动分类,能够高效处理和分类大量新闻内容。 面向AI模型开发新手用户,了解AI模型基础知识即可 ModelArts Standard模型训练 基于ModelArts Standard上运行GPU训练任务

    来自:帮助中心

    查看更多 →

  • 大屏

    屏 新建屏 更新屏 获取屏组件列表 获取屏指定组件数据 批量发布屏 批量删除屏 批量下线

    来自:帮助中心

    查看更多 →

  • 大模型微调需要的数据有要求吗?

    模型微调需要的数据有要求吗? AI原生应用引擎用于模型微调的数据集任务领域为“ 自然语言处理 ”、数据集格式为“对话文本”。 文件内容要求为标准json数组,例如: [{"instruction": "aaa", "input": "aaa", "output": "aaa"},{"instruction":

    来自:帮助中心

    查看更多 →

  • 案例:建立合适的索引

    案例:建立合适的索引 现象描述 查询与销售部所有员工的信息: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 --建表 CREATE TABLE staffs (staff_id NUMBER(6)

    来自:帮助中心

    查看更多 →

  • 案例:改建分区表

    案例:改建分区表 逻辑上的一张表根据某种策略分成多个物理块进行存储,这张逻辑上的表称之为分区表,每个物理块则称为一个分区。一般对数据和查询都有明显区间段特征的表使用分区策略可通过较小不必要的数据扫描,从而提升查询性能 在查询时,可通过分区剪枝技术尽可能减少底层数据扫描,即缩小表的

    来自:帮助中心

    查看更多 →

  • 昇腾迁移快速入门案例

    昇腾迁移快速入门案例 ModelArts提供了两个昇腾迁移案例,方便您快速了解并完成昇腾迁移过程。 约束限制 当前仅贵阳一区域支持选择本案例中的规格及镜像。 操作步骤 ModelArts管理控制台左侧导航栏中选择“开发环境 > Notebook”,进入“Notebook”管理页面。

    来自:帮助中心

    查看更多 →

  • 使用数据工程构建科学计算大模型数据集

    使用数据工程构建科学计算模型数据集 科学计算模型支持接入的数据集类型 盘古科学计算模型仅支持接入气象类数据集,该数据集格式要求请参见气象类数据集格式要求。 构建科学计算模型训练数据要求 构建科学计算模型进行训练的数据要求见表1。 表1 科学计算模型训练数据要求 模型类别

    来自:帮助中心

    查看更多 →

  • ModelArts最佳实践案例列表

    DevServer的训练过程,训练使用PyTorch框架和昇腾NPU计算资源。训练后的模型可用于推理部署,搭建模型问答助手。 主流开源模型基于Standard+OBS适配PyTorch NPU训练指导(6.3.907) 主流开源模型基于Standard+OBS+SFS适配PyTorch NPU训练指导(6

    来自:帮助中心

    查看更多 →

  • 案例:改建分区表

    案例:改建分区表 现象描述 如下简单SQL语句查询, 性能瓶颈点在normal_date的Scan上。 1 2 3 4 5 6 7 QUERY PLAN

    来自:帮助中心

    查看更多 →

  • 案例:改建分区表

    案例:改建分区表 现象描述 如下简单SQL语句查询, 性能瓶颈点在dwcjk的Scan上。 优化分析 从业务层确认表数据(在cjrq字段上)有明显的日期特征,符合分区表的特征。重新规划dwcjk表的表定义:字段cjrq为分区键、天为间隔单位定义分区表dwcjk_part。修改后结果如下,性能提升近1倍。

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了