开发Spark应用 Spark Core样例程序 Spark SQL样例程序 通过JDBC访问Spark SQL样例程序 Spark读取HBase表样例程序 Spark从HBase读取数据再写入HBase样例程序 Spark从Hive读取数据再写入HBase样例程序 Spark S

查看更多 →

使用Spark on CCE 使用Spark的Kubernetes调度程序spark-submit，可以将Spark应用程序提交到Kubernetes集群中运行，详情请参见在Kubernetes上运行Spark。使用spark-submit提交Spark应用程序的工作原理如下：

查看更多 →

开发Spark应用 Spark Core样例程序 Spark SQL样例程序 通过JDBC访问Spark SQL样例程序 Spark读取HBase表样例程序 Spark从HBase读取数据再写入HBase样例程序 Spark从Hive读取数据再写入HBase样例程序 Spark S

查看更多 →

Spark对接OpenTSDB 创建表关联OpenTSDB 插入数据至OpenTSDB表 查询OpenTSDB表 默认配置修改 父主题： 使用Spark（ MRS 3.x之前版本）

查看更多 →

Manager界面中配置。 表1 Spark2x日志列表 日志类型 日志文件名 描述 SparkResource2x日志 spark.log Spark2x服务初始化日志。 prestart.log prestart脚本日志。 cleanup.log 安装卸载实例时的清理日志。 spark-availability-check

查看更多 →

Spark Streaming Streaming任务打印两次相同DAG日志 Spark Streaming任务一直阻塞 运行Spark Streaming任务参数调优的注意事项 为什么提交Spark Streaming应用超过token有效期，应用失败 为什么Spark Str

查看更多 →

AMD64、ARM 支持的场景：spark-sql模式 配置参数 在Spark客户端的“{客户端安装目录}/Spark/spark/conf/spark-defaults.conf”配置文件中进行设置，修改如下参数： 参数 说明 默认值 spark.plugins Spark用到的插件，参数值设置为io

查看更多 →

指南》。 Spark SQL语法创建表时是否支持定义主键 Spark SQL语法不支持定义主键。 DLI Spark jar作业是否能访问DWS跨源表？ 可以访问。 详细操作请参考访问DWS和访问SQL库表。 如何查看Spark内置依赖包的版本？ DLI内置依赖包是平台默认提供的依赖包，用户打包Spark或Flink

查看更多 →

什么是VR云渲游平台 VR云渲游平台（VR Cloud Rendering & Gaming Platform, CVR），基于华为云基础设施多元架构、极致性能、端边云融合等优势，依托华为在处理器、GPU等领域多年技术积累，针对3D应用云流化以及强交互类VR场景，面向教育培训、文

查看更多 →

IntelliJ IDEA等平台 API检索 打开插件左侧主面板：点击IDEA左侧工具框中的"Huawei Cloud Toolkit"工具按钮、点击插件主面板中的API主页，则可打开华为云API插件主面板 。 在搜索框中搜索华为云发布的所有云服务、API、SDK、错误码等。同时

查看更多 →

IntelliJ IDEA等平台 补全操作 在IntelliJ IDEA的编辑中输入代码时会，提供代码补全功能，这时会提示API联想，选择想要插入的API，插入SDK代码，API调用的SDK代码一键生成。同时在右下角弹出气泡可以根据提示查看插入API的详情。 图1 完成补全后，在

查看更多 →

IntelliJ IDEA等平台 安装方式 请参考IntelliJ平台上API插件的安装。 安装验证 在IntelliJ系列平台上安装插件成功后在左侧的导航栏中可以看到Huawei Cloud Toolkit图标，则说明安装成功。 父主题： 底座插件安装

查看更多 →

盘古辅助制药平台 应用场景 基本概念

查看更多 →

平台计费方式 基因平台 基因平台提供包年包月、按需两种计费方式，您可以按需求进行选择，计费详情请参见价格计算器。 盘古辅助制药平台 盘古辅助制药平台提供包年包月、按需两种计费方式，您可以按需求进行选择，计费详情请参见价格计算器。 OBS数据下载 OBS数据下载产生的流量费用为按需

查看更多 →

订阅平台管理数据 典型场景 第三方应用可向物联网平台订阅设备相关的管理数据，当物联网平台中设备进行版本升级等相关操作时，平台会向第三方应用发送通知消息，知会其具体的操作状态或操作结果信息。第三方应用可以调用此接口向物联网平台订阅不同类型的设备升级操作通知。 接口功能 支持第三方应

查看更多 →

应用 服务器 可调用此接口在物联网平台订阅设备相关的业务信息，当设备的业务信息发生变化时（如设备注册、设备数据上报、设备状态变更等），平台会向应用服务器发送通知消息。Status Code: 201 Created

查看更多 →

应用服务器可调用此接口向物联网平台订阅设备相关的管理数据，当设备进行版本升级等相关操作时，平台会向应用服务器发送通知消息，知会其具体的操作状态或操作结果信息。Status Code: 200 OK

查看更多 →

获取医疗平台信息 功能介绍 获取医疗平台信息 URI GET /v1/{project_id}/system/overview 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 华为云项目ID，您可以从获取项目ID中获取。 最小长度：1 最大长度：128

查看更多 →

下载&登录差旅平台 访问APP 方法一：扫描二维码下载； 方法二：进入手机-应用市场，输入“慧通差旅”搜索，点击“安装”。 访问PC 浏览器输入地址：https://itravel.hwht.com/login?from=hwtrip，进入差旅平台首页。

查看更多 →

标注数据 配置中心 租户开发的应用在调用平台接口时需要进行平台鉴权认证，可以使用“AK/SK访问密钥”或“平台API Key”进行平台的鉴权认证。 创建及管理AK/SK访问密钥 创建及管理平台API Key 开发中心 开发中心提供全场景一站式作业平台，承载端到端研发作业流，提供涵盖软件

查看更多 →

Spark性能优化 概述 Spark是基于内存的分布式计算框架。在迭代计算的场景下，数据处理过程中的数据可以存储在内存中，提供了比MapReduce高10到100倍的计算能力。Spark可以使用HDFS作为底层存储，使用户能够快速地从MapReduce切换到Spark计算平台上去

查看更多 →