对于倾斜列，在不产生歧义的情况下，可以使用原名也可以使用别名。skew hint的column不支持表达式，如果需要指定采用分布键为表达式的重分布存在倾斜，需要将重分布键指定为新的列，以新的列进行hint。 对于倾斜值，个数需为列数的整数倍并按列的顺序进行组合，组合的个数不能超过10个

查看更多 →

别名。skew hint的column不支持表达式，如果需要指定采用分布键为表达式的重分布存在倾斜，需要将重分布键指定为新的列，以新的列进行hint。 对于倾斜值，个数需为列数的整数倍并按列的顺序进行组合，组合的个数不能超过10个。如果各倾斜列的倾斜值的个数不一样，为了满足按列组

查看更多 →

对于倾斜列，在不产生歧义的情况下，可以使用原名也可以使用别名。skew hint的column不支持表达式，如果需要指定采用分布键为表达式的重分布存在倾斜，需要将重分布键指定为新的列，以新的列进行hint。 对于倾斜值，个数需为列数的整数倍并按列的顺序进行组合，组合的个数不能超过10个

查看更多 →

对于倾斜列，在不产生歧义的情况下，可以使用原名也可以使用别名。skew hint的column不支持表达式，如果需要指定采用分布键为表达式的重分布存在倾斜，需要将重分布键指定为新的列，以新的列进行hint。 对于倾斜值，个数需为列数的整数倍并按列的顺序进行组合，组合的个数不能超过10个

查看更多 →

参考图10可以看到数据倾斜时，单个任务的shuffle数据远大于其他Task的数据，导致该任务耗时时间变长。 图10 数据倾斜示例图 数据倾斜原因和解决： Shuffle的数据倾斜基本是由于join中的key值数量不均衡导致。 对join连接条件进行group by 和count，统计每个连接条件的key值的数量。示例如下：

查看更多 →

CSS：是华为云ELK生态的一系列软件集合，为您全方位提供托管的ELK生态云服务，兼容Elasticsearch、Kibana、Cerebro等软件。 云监控CES：为用户提供一个针对弹性云服务器、带宽等资源的立体化监控平台。使您全面了解华为云上的资源使用情况、业务的运行状况，并及时收到异

查看更多 →

运行环境如何安装Python包？ Python运行环境已安装常用的python包。如果没有，可通过如下步骤安装： 本机下载pip包。 将pip包上传至OBS。 在代码中下载OBS中pip包。 pip本地安装。 import os os.system('pip install pacakge')

查看更多 →

下载最新“jobmanager.log”文件，搜索“RUNNING to FAILED”关键字，通过上下文的错误栈，确认失败原因。 如果“jobmanager.log”文件中的信息不足以定位，可以在运行日志中找到对应的“taskmanager.log”日志，搜索“RUNNING to FAILED”关键字，确认失败原因。

查看更多 →

执行Jar包。 在Linux客户端下执行Jar包的时候，先将应用开发环境中生成的Jar包拷贝上传至客户端安装目录的“lib”目录中，并确保Jar包的文件权限与其它文件相同。 用安装用户切换到客户端目录的“bin”目录下，然后运行如下命令使Jar包执行： [Ruby@cloudt

查看更多 →

在Linux环境中编包并运行Spark程序 操作场景 在程序代码完成开发后，您可以上传至Linux客户端环境中运行应用。使用Scala或Java语言开发的应用程序在Spark客户端的运行步骤是一样的。 使用Python开发的Spark应用程序无需打包成jar，只需将样例工程复制到编译机器上即可。

查看更多 →

包内的子程序 在包体内创建的子程序，在包内声明创建的存储过程及函数。 详细使用请参考：CREATE PACKAGE 父主题： 子程序

查看更多 →

如何查看 云服务器 的mac地址？ 本节介绍如何查看云 服务器 的mac地址。 云服务器的mac地址不支持修改。 Linux操作系统（CentOS 6） 登录Linux云服务器。 执行以下命令，查看云服务器的mac地址。 ifconfig 图1 查看mac地址 Linux操作系统（CentOS

查看更多 →

在Linux环境中编包并运行Spark程序 操作场景 在程序代码完成开发后，您可以上传至Linux客户端环境中运行应用。使用Scala或Java语言开发的应用程序在Spark客户端的运行步骤是一样的。 使用Python开发的Spark应用程序无需打包成jar，只需将样例工程复制到编译机器上即可。

查看更多 →

到启动程序的classpath路径下面。 如果修改了集群的 域名 ，那么core-site.xml将发生变化，需要下载最新的core-site.xml并放入到打包hive二次开发样例代码进程的classpath路径下面。 解决办法 下载集群Hive最新的客户端，获取最新的“core-site

查看更多 →

如何让主机安全服务停止计费？ 如果您需要让空闲的主机安全服务配额停止计费，请参照本章节进行处理。 包年/包月计费的主机安全服务配额支持退订，退订后，会退还您未消费的金额，详细操作请参见退订包年/包月计费模式的主机安全服务配额。 按需计费的主机安全服务配额按您实际的使用时长收费，关

查看更多 →

如何让主机安全服务停止计费？ 如果您需要让空闲的主机安全服务配额停止计费，请参照本章节进行处理。 包年/包月计费的主机安全服务配额支持退订，退订后，会退还您未消费的金额，详细操作请参见退订包年/包月计费模式的主机安全服务配额。 按需计费的主机安全服务配额按您实际的使用时长收费，关

查看更多 →

如何限制存储在ZKstore中的应用程序诊断消息的大小 问题 如何限制存储在ZKstore中的应用程序诊断消息的大小？ 回答 在某些情况下，已经观察到诊断消息可能无限增长。由于诊断消息存储在状态存储中，不建议允许诊断消息无限增长。因此，需要有一个属性参数用于设置诊断消息的最大大小。

查看更多 →

如何限制存储在ZKstore中的应用程序诊断消息的大小 问题 如何限制存储在ZKstore中的应用程序诊断消息的大小？ 回答 在某些情况下，已经观察到诊断消息可能无限增长。由于诊断消息存储在状态存储中，不建议允许诊断消息无限增长。因此，需要有一个属性参数用于设置诊断消息的最大大小。

查看更多 →

2016的云服务器为例，介绍了清理云硬盘空间的常用操作。同时建议在日常使用中养成良好的云硬盘使用习惯，定期清理冗余文件，有助于您节省云硬盘空间。 定期将不常用的文件压缩保存，节省云硬盘空间。 定期使用云硬盘清理工具清理云硬盘空间，删除不需要的文件，并定期清理回收箱。 卸载不需要的程序，释放云硬盘空间。

查看更多 →

应用程序在Windows环境下运行的机器与 MRS 集群的网络不是完全通畅的，需要重新设置防火墙，把需要使用的UDP端口都打开，保证应用程序在Windows环境下运行的机器与MRS集群的网络是完全通畅的。 父主题： MapReduce应用开发常见问题

查看更多 →

单击“创建成功资源退订”页签。 单个资源退订与批量退订可使用不同的操作方式： 退订单个资源：单击待退订资源所在行的“退订资源”。 批量退订：在退订列表中勾选需要退订的资源，单击列表左上角的“退订资源”。 查看退订信息，勾选“我已确认本次退订金额和相关费用”后，单击“退订”。 父主题： 续费与退订

查看更多 →