华为云·云享专家是云计算行业专家和业界精英,专注于分享技术经验,帮助他人成长,构建共赢生态。

 

    hadoop及大数据专家 更多内容
  • 执行大数据量的shuffle过程时Executor注册shuffle service失败

    求,从而出现上面的问题。 Executor注册shuffle service的超时时间是5秒,最多重试3次,该参数目前不可配。 建议适当调task retry次数和Executor失败次数。 在客户端的“spark-defaults.conf”配置文件中配置如下参数。“spark

    来自:帮助中心

    查看更多 →

  • 大屏所展现的数据如何获取到本地?

    屏所展现的数据如何获取到本地? 可通过对接开放API或屏所提供的报告导出功能获取相关数据。对接API的具体方法可参见最佳实践中的如何调用API。 父主题: 其他使用相关

    来自:帮助中心

    查看更多 →

  • 站点及ZTP开局数据规划

    站点ZTP开局数据规划 添加多个站点时,往往需要配置相同的网关类型、WAN链路条数和传输网络。通过定制链路模板可以将这些重复的配置信息模块化。 配置站点在WAN侧的物理链路,是进行开局的前提条件。站点配置或激活后,可新增或删除WAN侧链路。 表1 站点模板(RR设备) 参数 数据

    来自:帮助中心

    查看更多 →

  • 下线及还原数据库实例

    下线还原数据库实例 下线实例是从WiseDBA的实例列表中进行软删除,华为云控制台中的数据库资源并没有被删除,所有下线的实例在回收站中展示,下线的实例支持还原。 前提条件 需要具备AppStage服务运维岗位权限,权限申请操作请参见申请权限。 下线数据库实例 下线实例会导致Wi

    来自:帮助中心

    查看更多 →

  • 交付流程

    参与鲲鹏移植方案的评审。 适配改造 配置基础软硬件环境,进行组件替换(主要三组件为OS、中间件和数据库)和开发环境业务系统ARM适配。 华为责任 客户责任 负责配置管理硬件软件平台环境。 负责OS/中间件/数据库替换和运行环境开发语言的适配技术指导。 配合华为进行组件替换,在华为指导下完成组件替换工作。

    来自:帮助中心

    查看更多 →

  • 大屏分享协作

    在协同授权配置页面编辑屏权限。 选择授予的权限。 编辑授权:打开后可赋予成员编辑权限,支持创建、编辑、替换和删除屏,同时支持基于屏进行数据分析。 开启屏的编辑权限,默认关联开启屏的使用/查看权限。 导出授权:打开后可赋予成员使用权限。支持对屏的分析,同时支持基于屏进行数据分析。

    来自:帮助中心

    查看更多 →

  • 执行大数据量的shuffle过程时Executor注册shuffle service失败

    求,从而出现上面的问题。 Executor注册shuffle service的超时时间是5秒,最多重试3次,该参数目前不可配。 建议适当调task retry次数和Executor失败次数。 在客户端的“spark-defaults.conf”配置文件中配置如下参数。“spark

    来自:帮助中心

    查看更多 →

  • SAP监控大屏

    系统进入监控管理页面。在“SAP监控数据屏”区域可对屏展示信息进行编辑。 在“SAP监控数据屏”区域中,选中待删除监控视图并单击。 系统显示“删除监控视图”页面。 单击“确定”。 若监控屏中不再展示该监控视图,则表示删除成功。 添加监控视图 在“SAP监控屏”区域,您可以添加监控视图对您关心的监控指标进行监控。

    来自:帮助中心

    查看更多 →

  • MapReduce大任务的AM调优

    此任务的问题是,task数量变多时,AM管理的对象也线性增长,因此就需要更多的内存来管理。AM默认分配的内存堆大小是1GB。 操作步骤 通过调如下的参数来进行AM调优。 参数入口: 在Yarn客户端的“mapred-site.xml”配置文件中调整如下参数。“mapred-site

    来自:帮助中心

    查看更多 →

  • 预定义大屏

    选择“设备管理 > 屏监控 > 预定义屏”。 选择需要设置预定义屏的机房。 单击左树上方的。 在弹出的对话框中,选择需要设置预定义屏的机房。 一个机房仅支持创建一张预定义屏。 单击“确定”。 设置名称 LOG O,预定义屏的欢迎语和显示时间格式。 单击左上方,设置名称LOGO。

    来自:帮助中心

    查看更多 →

  • 运维配置及数据初始化

    运维配置数据初始化 各应用告警接入AOM 实践1:IoTDA告警接入AOM 创建设备联动规则: 图1 设备联动 选择对应职场的边缘设备,设置告警触发条件(如“设备状态触发”),执行动作选择“上报告警”,并设置对应的告警级别和告警内容 图2 创建告警联动规则 配置完成后,当告警产

    来自:帮助中心

    查看更多 →

  • 站点及ZTP开局数据规划

    站点ZTP开局数据规划 添加多个站点时,往往需要配置相同的网关类型、WAN链路条数和传输网络。通过定制链路模板可以将这些重复的配置信息模块化。 配置站点在WAN侧的物理链路,是进行开局的前提条件。站点配置或激活后,可新增或删除WAN侧链路。 表1 站点模板 参数 数据 模板名 Double_RR_Mix

    来自:帮助中心

    查看更多 →

  • 下线及还原数据库实例

    下线还原数据库实例 下线实例是从WiseDBA的实例列表中进行软删除,华为云控制台中的数据库资源并没有被删除,所有下线的实例在回收站中展示,下线的实例支持还原。 前提条件 需要具备AppStage服务运维岗位权限,权限申请操作请参见申请权限。 下线数据库实例 下线实例会导致Wi

    来自:帮助中心

    查看更多 →

  • Hive支持ZSTD压缩格式

    stored as textfile; ZSTD压缩格式的表和其他普通压缩表的SQL操作没有区别,可支持正常的增删查聚合类SQL操作。 父主题: Hive数据存储加密配置

    来自:帮助中心

    查看更多 →

  • 值班响应大屏

    进入目标工作空间管理页面 在左侧导航栏选择“安全态势 > 安全屏”,进入安全屏页面。 图2 进入安全屏页面 单击“值班响应屏”图片,进入值班响应屏信息页面,如图3。 页面中各个模块的功能介绍和使用方法详见下述内容。 图3 值班响应屏 值班响应屏总览 如图4所示,展示未处理告警、事件、漏洞、基线的总数。

    来自:帮助中心

    查看更多 →

  • 大屏监控(Beta)

    屏监控(Beta) 屏监控功能支持对所有直播资源的用量分布情况进行实时监控,可以帮助您极大地提高运营效率。 屏监控中提供的数据包括: 今日下行流量 上/下行带宽 观众/主播数 实时状态码 本月转码时长 本月录制峰值 本月截图数量 下行带宽/观众数/主播数的地域分布情况 注意事项

    来自:帮助中心

    查看更多 →

  • 安装程序及依赖驱动清单

    安装程序依赖驱动清单 以下内容为本次安装部署中安装程序依赖驱动的清单列表,当需要使用到主数据数据集成中的实时数据处理功能时,需根据实际需求安装对应 服务器 驱动。 安装程序清单 表1 安装程序清单 安装程序名称 支持的操作系统 说明 esendatagovernanceV2.5

    来自:帮助中心

    查看更多 →

  • 技术支持

    MRS 服务是租户完全可控的半托管云服务,为用户提供一站式企业级大数据平台,用户可以在MRS集群上轻松运行Hadoop、Hive、Spark、HBase、Kafka、Flink等大数据组件,帮助企业快速构建海量数据信息处理系统,并通过对海量信息数据实时与非实时的分析挖掘,发现全新价值点和企业商机。

    来自:帮助中心

    查看更多 →

  • 大企业IT治理架构

    越多。企业的IT治理架构也会受到组织结构的影响,以下是一个典型的企业IT治理架构,由于图片空间有限,该架构图中没有列出全部的层级,如IT项目A331的功能小组、成员和运行环境没有呈现出来。本章所描述的企业IT治理最佳实践以下图的IT治理架构为基础,将其映射到华为云上有效运转起来。

    来自:帮助中心

    查看更多 →

  • 数据拷贝

    数据快递服务(DES) 对于TB或PB级数据上云的场景,华为云提供数据快递服务 DES。将线下集群数据已导出的元数据拷贝到DES盒子,快递服务将数据递送到华为云机房,然后通过云数据迁移 CDM 将DES盒子数据拷贝到HDFS。 父主题: 数据迁移方案介绍

    来自:帮助中心

    查看更多 →

  • 开通综合大屏

    若购买的按需资源后,需长期使用综合屏功能,可在综合屏管理页面,单击“转包周期”,将资源计费模式转为包年/包月,详细说明请参见按需转包周期。 若购买的包周期综合屏即将到期或已经到期,可在综合屏管理页面,单击“续费”,延长当前包周期资源的使用期限,详细说明请参见续费。 若不再使用综合屏功能,可在

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了