题。 因此，当数据量达到10T级别以上的Spark任务，建议用户关闭ShuffleService功能，即在“Spark-defaults.conf”配置文件中将配置项“spark.shuffle.service.enabled”配置为“false”。 父主题： Spark Core

查看更多 →

创建SOAP Service 手工创建SOAP Services 导入SOAP Package 父主题： 使用SOAP服务调用SOAP协议接口

查看更多 →

a given Service correctly reflects the current state of that Service. (For ClusterIP Services, look at clusterIP to see if the Service is IPv4

查看更多 →

多集群Service M CS 概述 使用MCS 父主题： 集群联邦

查看更多 →

磁盘，提升shuffle效率。 开启spark.shuffle.service.enabled=true，启动shuffle服务，提升任务shuffle的稳定性。 配置项 集群默认值 调整后 --conf spark.shuffle.readHostLocalDisk false

查看更多 →

"internal_service_port": 0, "internal_service_port_range": "55-66", "protocol": "udp", "external_service_port": 0,

查看更多 →

使用Hash shuffle出现任务失败 问题 使用Hash shuffle运行1000000（map个数）*100000（reduce个数）的任务，运行日志中出现大量的消息发送失败和Executor心跳超时，从而导致任务失败。 回答 对于Hash shuffle，在shuffle的过程

查看更多 →

配置MapReduce shuffle address 配置场景 当MapReduce shuffle服务启动时，它尝试基于localhost绑定IP。如果需要MapReduce shuffle服务去连接特定IP，那么没有可用的配置。下面的描述允许您配置连接到特定的IP。 配置描述

查看更多 →

使用Hash shuffle出现任务失败 问题 使用Hash shuffle运行1000000（map个数）*100000（reduce个数）的任务，运行日志中出现大量的消息发送失败和Executor心跳超时，从而导致任务失败。 回答 对于Hash shuffle，在shuffle的过程

查看更多 →

管理Native Service 使用说明 部署Native Service后，您可以通过CCE控制台对其执行升级、查看日志、监控、伸缩、回退、删除等操作。 本章节仅介绍如何升级Native Service，其他操作请参见管理工作负载和任务。 升级Native Service 基于CCE

查看更多 →

使用Hash shuffle出现任务失败 访问Spark应用的聚合日志页面报“DNS查找失败”错误 由于Timeout waiting for task异常导致Shuffle FetchFailed Executor进程Crash导致Stage重试 执行大数据量的shuffle过程时Executor注册shuffle

查看更多 →

使用Hash shuffle出现任务失败 访问Spark应用的聚合日志页面报“DNS查找失败”错误 由于Timeout waiting for task异常导致Shuffle FetchFailed Executor进程Crash导致Stage重试 执行大数据量的shuffle过程时Executor注册shuffle

查看更多 →

执行create external table命令报错 问题现象 执行命令：create external table xx(xx int) stored as textfile location '/tmp/aaa/aaa'，报以下错误： Permission denied. Principal

查看更多 →

port_id和private_ip不能同时生效。 对于all port类型的规则，要求internal_service_port = 0，external_service_port = 0，protocol = ANY。 调用方法 请参见如何调用API。 URI POST /v

查看更多 →

K8sExternalIPs metadata: name: external-ips spec: match: kinds: - apiGroups: [""] kinds: ["Service"] parameters: allowedIPs:

查看更多 →

port_id和private_ip不能同时生效。 对于all port类型的规则，要求internal_service_port = 0，external_service_port = 0，protocol = ANY. 调用方法 请参见如何调用API。 URI POST /v

查看更多 →

项目”中，单击“行业应用”，再单击“创建Native Service”。 图1 单击创建Native Service 设置标签和名称，单击“创建”。 图2 配置基本信息 添加图标：为该Native Service设置图标。 标签：新建Native Service的标签名，用于在界面展示。 名称：新建Native

查看更多 →

部署Native Service 配置完API后，还需要部署才可使用Native Service。请使用此前设计的Chart包，在CCE上完成服务的部署。 前提条件 已下载之前设计的Chart包。 在AstroZero开发环境的Native Service配置页面，选择“导航”。

查看更多 →

注册Native Service 使用说明 注册Native Service后，才可以在AstroZero的其他组件内（如脚本、服务编排等）调用原生服务的接口，也可将该原生服务开放给第三方系统进行访问。 操作步骤 注册Native Service，有两种入口方式。 方式一： 参考

查看更多 →

K8sExternalIPs metadata: name: external-ips spec: match: kinds: - apiGroups: [""] kinds: ["Service"] parameters: allowedIPs:

查看更多 →

Service Broker介绍 Exchange已默认提供一个支持资产通过Service Broker方式接入的适配层，接入方按照既定的接口规范完成接口开发，填写对应的接口信息就可以完成接入，而不需要开发单独的适配器包，每一个新的Service Broker接入对应到一个Service

查看更多 →