中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    大数据计算框架 更多内容
  • 典型场景示例:搭建某商品销售数据的大屏

    回到屏A时,屏A单选下拉的参数保持不变,只显示筛选后的数据,如图9所示。如果不设置全局参数,从屏B跳转回到屏A时,屏A将显示所有数据。 步骤3:配置图表跳转参数 配置屏A全局参数: 单击“线状图>交互>跳转”进入图表跳转界面。 “需要绑定的字段”选择“product_type”。

    来自:帮助中心

    查看更多 →

  • PERF05-04 大数据场景资源优化

    节点上,以提高数据的可靠性和可扩展性。 数据压缩:对于大量的数据,可以采用压缩算法进行压缩,以减少数据的存储空间和传输带宽。 并行计算:使用并行计算框架,如Apache Spark、Apache Flink等,将计算任务分配到多个节点上并行执行,以提高计算速度和效率。 内存优化:

    来自:帮助中心

    查看更多 →

  • 查看大单续订任务

    查看单续订任务 单续订任务是指通过自动化任务识别将到期的未续单,提前提醒伙伴客户经理跟进客户引导续订,帮助伙伴进行订单续订管理,提升客户留存、减少流失。 任务订单范围为自然月内将到期的实付金额≥5000元但还未完成续订的订单(金额续费率<60%),不包括偏一次性购买或客户续

    来自:帮助中心

    查看更多 →

  • YARN应用开发简介

    ce(MRv2/Yarn)框架具有更好的扩展性、可用性、可靠性、向后兼容性和更高的资源利用率,以及能支持除了MapReduce计算框架外的更多的计算框架。 基本概念 ResourceManager(RM) RM是一个全局的资源管理器,负责整个系统的资源管理和分配。它主要由两个组件

    来自:帮助中心

    查看更多 →

  • SAP监控大屏配置应用监控成功但没有数据

    SAP监控屏配置应用监控成功但没有数据 如果出现屏配置应用监控成功但没有数据,您可以根据表1中列举的原因进行排除。 表1 故障排除 可能原因 排除方案 屏配置错误,或配置的应用已删除。 进入编辑模式,检查应用、应用SID、数据库应用、数据库应用SID配置是否符合规划,如有错误,修正并更新配置即可。

    来自:帮助中心

    查看更多 →

  • SAP监控大屏配置应用监控成功但没有数据

    SAP监控屏配置应用监控成功但没有数据 如果出现屏配置应用监控成功但没有数据,您可以根据表1中列举的原因进行排除。 表1 故障排除 可能原因 排除方案 屏配置错误,或配置的应用已删除。 进入编辑模式,检查应用、应用SID、数据库应用、数据库应用SID配置是否符合规划,如有错误,修正并更新配置即可。

    来自:帮助中心

    查看更多 →

  • 方案概述

    部署1个Volcano插件,提供通用、可扩展、高性能、稳定的原生批量计算平台。 方案优势 丰富的计算框架支持 通过CRD提供了批量计算任务的通用API,通过提供丰富的插件及作业生命周期高级管理,支持TensorFlow,MPI,Spark等计算框架容器化运行在Kubernetes上。 高级调度 面向批量计算、高

    来自:帮助中心

    查看更多 →

  • 租户整体大屏介绍

    租户整体屏介绍 使用注册的华为乾坤帐号登录控制台,详细过程参见帐号注册。 租户屏主要由资产网络和资产安全两模块组成,具体模块内容介绍如表1所示。 图1 租户整体屏 在控制台左上角,选择“屏 > 租户整体屏”。 单击页面上,支持用户自定义租户屏,资产网络和资产安全图表均最多支持选择4个。详细参见表1。

    来自:帮助中心

    查看更多 →

  • Spark Core内存调优

    开发Spark应用程序时,优化RDD的数据结构。 使用原始类型数组替代集合类,如可使用fastutil库。 避免嵌套结构。 Key尽量不要使用String。 开发Spark应用程序时,建议序列化RDD。 RDD做cache时默认是不序列化数据的,可以通过设置存储级别来序列化RDD减小内存。例如:

    来自:帮助中心

    查看更多 →

  • Spark性能优化

    ,以减少task数量,减少cpu负载。 使用spark sql查找一个表,表列数较多,但是查找的列较少:尽量使用rcfile或parquet格式,减少文件读取成本,同时选择合适的压缩格式,减少内存负载。 指标观测方法 性能衡量指标包括吞吐量、资源利用率、伸缩性。 吞吐量:在相同

    来自:帮助中心

    查看更多 →

  • 配置内存

    开发Spark应用程序时,优化RDD的数据结构。 使用原始类型数组替代集合类,如可使用fastutil库。 避免嵌套结构。 Key尽量不要使用String。 开发Spark应用程序时,建议序列化RDD。 RDD做cache时默认是不序列化数据的,可以通过设置存储级别来序列化RDD减小内存。例如:

    来自:帮助中心

    查看更多 →

  • YARN应用开发简介

    ce(MRv2/Yarn)框架具有更好的扩展性、可用性、可靠性、向后兼容性和更高的资源利用率,以及能支持除了MapReduce计算框架外的更多的计算框架。 基本概念 ResourceManager(RM) RM是一个全局的资源管理器,负责整个系统的资源管理和分配。它主要由两个组件

    来自:帮助中心

    查看更多 →

  • YARN应用开发简介

    ce(MRv2/Yarn)框架具有更好的扩展性、可用性、可靠性、向后兼容性和更高的资源利用率,以及能支持除了MapReduce计算框架外的更多的计算框架。 基本概念 ResourceManager(RM) RM是一个全局的资源管理器,负责整个系统的资源管理和分配。它主要由两个组件

    来自:帮助中心

    查看更多 →

  • YARN应用开发简介

    ce(MRv2/Yarn)框架具有更好的扩展性、可用性、可靠性、向后兼容性和更高的资源利用率,以及能支持除了MapReduce计算框架外的更多的计算框架。 基本概念 ResourceManager(RM) RM是一个全局的资源管理器,负责整个系统的资源管理和分配。它主要由两个组件

    来自:帮助中心

    查看更多 →

  • Spark Core内存调优

    开发Spark应用程序时,优化RDD的数据结构。 使用原始类型数组替代集合类,如可使用fastutil库。 避免嵌套结构。 Key尽量不要使用String。 开发Spark应用程序时,建议序列化RDD。 RDD做cache时默认是不序列化数据的,可以通过设置存储级别来序列化RDD减小内存。例如:

    来自:帮助中心

    查看更多 →

  • Flink应用开发简介

    Flink应用开发简介 Flink是一个批处理和流处理结合的统一计算框架,其核心是一个提供了数据分发以及并行化计算的流数据处理引擎。 Flink最适合的应用场景是低时延的数据处理(Data Processing)场景:高并发pipeline处理数据,时延毫秒级,且兼具可靠性。 Flink整个系统包含三个部分:

    来自:帮助中心

    查看更多 →

  • 盘古大模型套件使用流程

    图1 盘古模型套件使用流程 表1 使用流程说明 流程 子流程 说明 操作指导 准备工作 注册华为账号 并开通华为云 在使用华为云服务之前您需要注册华为账号并开通华为云。 注册华为账号并开通华为云 购买盘古模型套件 购买盘古系列模型及推理资产。 购买盘古模型套件 开通盘古模型服务

    来自:帮助中心

    查看更多 →

  • 快速搭建大屏(交互功能)

    预览数据 在地理搜索中,重新设定地理位置,柱状图则只显示对应位置的数据。 图10 预览过滤数据 交互功能验证无误后,单击屏开发页面右上方的发布按钮,配置发布参数,将屏发布和分享给其他用户。 图11 发布和分享屏 父主题: 如何使用 DLV

    来自:帮助中心

    查看更多 →

  • 综合态势感知大屏

    图1 进入目标工作空间管理页面 在左侧导航栏选择“安全态势 > 安全屏”,进入安全屏页面。 图2 进入安全屏页面 单击综合态势感知屏右下角的“播放”,进入综合态势感知屏信息页面。 页面中各个模块的功能介绍、数据信息等详见下述内容。 安全评分 展示当前资产安全健康得分。 表1

    来自:帮助中心

    查看更多 →

  • 购买盘古大模型套件

    购买盘古模型套件 在购买盘古模型套件之前,您可以通过“能力调测”功能体验平台预置的模型,请参见体验盘古预置模型能力。 盘古模型套件在订购时分为模型资产和模型推理资产。 模型资产即盘古系列模型,用户可以订购盘古基模型、功能模型、专业大模型。 基模型:基模型经过大规模数据的预训

    来自:帮助中心

    查看更多 →

  • 配置Grafana SAP监控大屏

    SAP监控屏 通过配置Grafana SAP监控屏,您可以在Grafana监控屏上实时了解各应用资源使用情况、告警情况以及SAP系统运行情况。 前提条件 已安装监控Agent,如未安装,请参见安装监控Agent进行安装。 安装并已启动Grafana,SAP 监控屏基于Gr

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了