中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    大数据经典案例 更多内容
  • 场景化实践案例

    场景化实践案例 电商平台业务监控 云监控在视频直播中的应用 云监控在众包平台中的应用 事件监控最佳实践 使用资源分组和告警功能上报指定资源的监控指标 配置 云服务器 全部挂载点磁盘使用率告警规则

    来自:帮助中心

    查看更多 →

  • 常用委托配置案例

    常用委托配置案例 分配委托权限(被委托方操作) 配置 弹性云服务器 E CS 委托

    来自:帮助中心

    查看更多 →

  • 典型场景配置案例

    典型场景配置案例 权限典型场景一览 对当前账号下单个IAM用户授权 对当前账号下多个IAM用户或用户群组授权 对其他账号授权 对所有账号授权 临时授权访问OBS 让IAM用户只能看到被授权的桶 限制指定的IP地址访问桶

    来自:帮助中心

    查看更多 →

  • 案例:使排序下推

    案例:使排序下推 在做场景性能测试时,发现某场景大部分时间是CN端在做window agg,占到总执行时间95%以上,系统资源不能充分利用。研究发现该场景的特点是:将两列分别求sum作为一个子查询,外层对两列的和再求和后做trunc,然后排序。可以尝试将语句改写为子查询,使排序下推。

    来自:帮助中心

    查看更多 →

  • 迁移项目案例

    迁移项目案例 上海XX科技有限公司是XX全量搬迁到华为云的重点客户,完成应用和大数据等2核心业务和15个子系统全面上线华为云。 迁移调研分析 基础资源自动采集,自动化匹配目标端资源,确保源端资源无缝对接至目标环境的合适配置,完成千余项资源整合。 图1 迁移调研分析1 通过分析应

    来自:帮助中心

    查看更多 →

  • 实际调优案例

    实际调优案例 案例:选择合适的分布列 案例:建立合适的索引 案例:调整分布键 案例:调整GUC参数best_agg_plan 案例:改写SQL消除子查询 案例:改写SQL排除剪枝干扰 案例:改写SQL消除in-clause 案例:调整查询重写GUC参数rewrite_rule 案例:使用DN

    来自:帮助中心

    查看更多 →

  • 案例:调整分布键

    983]。根据Scan的含义推测此计划性能问题的根源在于表s_riskrate_setting数据的分布倾斜。实际分析之后确实发现表s_riskrate_setting存在严重的数据倾斜。整改之后性能从94s提升为50s。 父主题: 实际调优案例

    来自:帮助中心

    查看更多 →

  • 实际调优案例

    实际调优案例 案例:调整查询重写GUC参数rewrite_rule 案例:建立合适的索引 案例:增加JOIN列非空条件 案例:改建分区表 案例:改写SQL消除子查询 案例:改写SQL消除in-clause 父主题: SQL调优指南

    来自:帮助中心

    查看更多 →

  • 使用数据工程构建NLP大模型数据集

    使用数据工程构建NLP模型数据集 NLP模型支持接入的数据集类型 盘古NLP模型仅支持接入文本类数据集,该数据集格式要求请参见文本类数据集格式要求。 构建NLP模型所需数据量 使用数据工程构建盘古NLP模型数据集进行模型训练时,所需数据量见表1。 表1 构建NLP模型所需数据量

    来自:帮助中心

    查看更多 →

  • 基于Kafka的Word Count数据流统计案例

    基于Kafka的Word Count数据流统计案例 应用场景 Kafka是一个分布式的消息发布-订阅系统。它采用独特的设计提供了类似JMS的特性,主要用于处理活跃的流式数据。 Kafka有很多适用的场景:消息队列、行为跟踪、运维数据监控、日志收集、流处理、事件溯源、持久化日志等。

    来自:帮助中心

    查看更多 →

  • CodeArts Snap代码生成案例 - 数据库接口编写

    CodeArts Snap代码生成案例 - 数据库接口编写 MyBatis作为常见的数据库框架,经常涉及到大量的接口类生成,并且很多情况下这些接口类都具有类似的格式,因此在上文的基础上生成新的业务接口也是比较常见的代码生成场景。 根据注释生成数据库接口代码 对于类似的业务逻辑,可以直接生成对应的接口。

    来自:帮助中心

    查看更多 →

  • 在运行环境或沙箱环境导入/查看Astro大屏应用

    在运行环境或沙箱环境导入/查看Astro屏应用 Astro屏应用可以从A环境导出,然后从B环境导入,从而实现不同环境之间的屏资产快速迁移。 前提条件 若屏页面的某些数据来源于某个轻应用或行业应用里定义的接口,您需要先将该接口所在的应用发布到B环境(沙箱或运行环境),并在B环境中安装该应用。

    来自:帮助中心

    查看更多 →

  • ModelArts入门实践

    er容器基础知识 主流开源模型基于DevServer适配PyTorch NPU推理指导 本案例基于ModelArts Lite DevServer提供的昇腾计算资源,指导用户完成Llama、Qwen、ChatGLM、Yi、Baichuan等常见开源模型的推理部署、模型评测、模型量化等功能。

    来自:帮助中心

    查看更多 →

  • 大屏

    如图6所示,选择开发场景为“屏”,单击右侧区域的“开发”,进入到配置的AppCube屏开发环境。 图6 进入屏开发环境 如果使用系统默认提供开发环境,进入到默认环境的业务屏。 如果使用配置的开发环境,进入到配置的开发地址,配置的地址不是直接进入业务屏,参见下图进入业务屏。 如图7所示,单击“导入项目包”。

    来自:帮助中心

    查看更多 →

  • ModelArts最佳实践案例列表

    用于推理部署,搭建模型问答助手。 主流开源模型基于Standard+OBS适配PyTorch NPU训练指导 主流开源模型基于Standard+OBS+SFS适配PyTorch NPU训练指导 预训练、SFT全参微调训练、LoRA微调训练 介绍主流的开源模型Llama系列

    来自:帮助中心

    查看更多 →

  • 使用数据工程构建科学计算大模型数据集

    使用数据工程构建科学计算模型数据集 科学计算模型支持接入的数据集类型 盘古科学计算模型仅支持接入气象类数据集,该数据集格式要求请参见气象类数据集格式要求。 构建科学计算模型训练数据要求 构建科学计算模型进行训练的数据要求见表1。 表1 科学计算模型训练数据要求 模型类别

    来自:帮助中心

    查看更多 →

  • 步骤1:安装案例源码包

    步骤1:安装案例源码包 前提条件 单击scene.zip,获取导入源码包,用于预置故障单流程场景涉及的对象和BPM活动。 操作步骤 参考如何进入经典开发环境中操作,进入经典版应用开发页面。 在主菜单中,选择“管理”,进入经典版开发环境配置。 在左侧导航栏中,选择“应用管理 > 软件包管理

    来自:帮助中心

    查看更多 →

  • 案例:改建分区表

    案例:改建分区表 逻辑上的一张表根据某种策略分成多个物理块进行存储,这张逻辑上的表称之为分区表,每个物理块则称为一个分区。一般对数据和查询都有明显区间段特征的表使用分区策略可通过较小不必要的数据扫描,从而提升查询性能 在查询时,可通过分区剪枝技术尽可能减少底层数据扫描,即缩小表的

    来自:帮助中心

    查看更多 →

  • 案例:建立合适的索引

    案例:建立合适的索引 现象描述 查询与销售部所有员工的信息: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 --建表 CREATE TABLE staffs (staff_id NUMBER(6)

    来自:帮助中心

    查看更多 →

  • 昇腾迁移快速入门案例

    昇腾迁移快速入门案例 ModelArts提供了两个昇腾迁移案例,方便您快速了解并完成昇腾迁移过程。 约束限制 当前仅贵阳一区域支持选择本案例中的规格及镜像。 操作步骤 ModelArts管理控制台左侧导航栏中选择“开发环境 > Notebook”,进入“Notebook”管理页面。

    来自:帮助中心

    查看更多 →

  • 大模型微调需要的数据有要求吗?

    模型微调需要的数据有要求吗? AI原生应用引擎用于模型微调的数据集任务领域为“ 自然语言处理 ”、数据集格式为“对话文本”。 文件内容要求为标准json数组,例如: [{"instruction": "aaa", "input": "aaa", "output": "aaa"},{"instruction":

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了