Hudi在upsert时占用了临时文件夹中大量空间 问题 Hudi在upsert时占用了临时文件夹中大量空间。 回答 当UPSERT大量输入数据时，如果数据量达到合并的最大内存时，Hudi将溢出部分输入数据到磁盘。 如果有足够的内存，请增加spark executor的内存和添加“hoodie

查看更多 →

平台下发文件下载临时URL 功能介绍 平台下发文件下载临时URL给设备。 Topic 下行: $oc/devices/{device_id}/sys/events/down 参数说明 字段名 必选/可选 类型 参数描述 object_device_id 可选 String 平台下

查看更多 →

使用了临时存储卷的Pod无法正常删除。 通过控制台使用本地临时卷 登录CCE控制台，单击集群名称进入集群。 在左侧导航栏中选择“工作负载”，在右侧选择“无状态负载”页签。 单击页面右上角“创建工作负载”，在“容器配置”中选择“数据存储”页签，并单击“添加存储卷 > 本地临时卷(EmptyDir)”。

查看更多 →

Client文件夹的自定义策略。 在左侧导航窗格中，单击“权限管理”>“权限”>“创建自定义策略”。 配置自定义策略参数。 在使用IAM权限之前需明确用户所需要的权限集合，IAM用户只拥有配置的策略所对应的权限。在本案例中APPServer只拥有APPClient文件夹下对象的所有操作权限。

查看更多 →

临时授权访问示例 开发过程中，您有任何问题可以在github上提交issue，或者在华为云对象存储服务论坛中发帖求助。 您可以通过SDK接口传入temp_auth_configure结构体参数生成临时授权访问的URL。以下代码展示了如何生成常用操作的URL，包括：创建桶、上传对象、下载对象、列举对象、删除对象。

查看更多 →

生成临时登录指令 功能介绍 调用该接口，通过获取响应消息头的X-Swr-Dockerlogin的值及响应消息体的host值，可生成临时登录指令。 接口约束 无 调用方法 请参见如何调用API。 URI POST /v2/manage/utils/secret 表1 Query参数

查看更多 →

statement_detail_decode(detail text, format text, pretty bool) 解析全量/慢SQL语句中的details字段的信息。 表3 statement_detail_decode参数说明 参数 类型 描述 detail text SQL语句产生的事件的集合(不可读)。

查看更多 →

Spark的临时表，存储着使用DataSource方式的临时表，在这一个层面中没有数据库的概念，因此对于这种类型表，表名在各个数据库中都是可见的。 上层为Hive的MetaStore，该层有了各个DB之分。在每个DB中，又有Hive的临时表与Hive的持久化表，因此在Spark中允许三个层次的同名数据表。

查看更多 →

Hudi在upsert时占用了临时文件夹中大量空间 问题 Hudi在upsert时占用了临时文件夹中大量空间。 回答 当UPSERT大量输入数据时，如果数据量达到合并的最大内存时，Hudi将溢出部分输入数据到磁盘。 如果有足够的内存，请增加spark executor的内存和添加“hoodie

查看更多 →

为了使LZC压缩生效，需要在client客户端的配置文件“core-site.xml”中（例如“客户端安装路径/HDFS/hadoop/etc/hadoop/”）配置下面的参数。 表1 参数描述 参数 描述 默认值 io.compression.codecs 为了使LZC压缩格式生效，在现有的压缩格式列表中增加了下面的值：

查看更多 →

pvc-sfs-auto-example.yaml 命令执行完成后会在集群所在VPC内创建一个文件存储，您可以在“存储管理 > 文件存储卷”中查看该文件系统，也可以在SFS的控制台查看该文件系统。 父主题： 文件存储卷

查看更多 →

$1}' > run_job_list run_job_list文件里面就是当前正在运行的JobId列表，文件内容格式为： job_<Timestamp>_<ID> 删除job_file_list文件中正在运行中的任务，确保在删除过期数据时不会误删正在运行任务的数据。 cat run_job_list

查看更多 →

添加租户时创建 配置租户在HDFS中的存储目录，系统默认将自动在“/tenant”目录中以租户名称创建文件夹。例如租户“ta1”，默认HDFS存储目录为“tenant/ta1”。第一次创建租户时，系统自动在HDFS根目录创建“/tenant”目录。支持自定义存储路径。 否 租户不可用

查看更多 →

添加租户时创建 配置租户在HDFS中的存储目录，系统默认将自动在“/tenant”目录中以租户名称创建文件夹。例如租户“ta1”，默认HDFS存储目录为“tenant/ta1”。第一次创建租户时，系统自动在HDFS根目录创建“/tenant”目录。支持自定义存储路径。 否 租户不可用

查看更多 →

statement_detail_decode(detail text, format text, pretty bool) 解析全量/慢SQL语句中的details字段的信息。 表3 statement_detail_decode参数说明 参数 类型 描述 detail text SQL语句产生的事件的集合(不可读)。

查看更多 →

导入为存储池。 条带化模式的存储池不支持扩容，条带化存储池扩容后可能造成碎片空间，无法使用。 存储池不支持缩容和删除。 如果删除节点上存储池的磁盘，会导致存储池异常。 导入存储池 创建节点时导入 在创建节点时，在存储配置中可以为节点添加数据盘，选择“作为持久存储卷”导入存储池，详情请参见创建节点。

查看更多 →

自动学习生成的模型，支持哪些其他操作 支持部署为在线服务、批量服务或边缘服务。 在自动学习页面中，仅支持部署为在线服务，如需部署为批量服务或边缘服务，可在“AI应用管理 > AI应用”页面中直接部署。 支持发布至市场 将产生的模型发布至AI Gallery，共享给其他用户。 支持创建新版本 创建新版

查看更多 →

设置 CDN加速 后，处理过的图片存储在哪里？ 用户通过CDN访问图片处理服务，CDN会对处理后的图片做缓存，此时处理后的图片存储在CDN。当用户再次对该图片进行相同的处理时，由CDN直接返回处理后的效果，不会再次访问图片处理服务，也不会对此次图片处理请求进行计费。 父主题： 图片处理

查看更多 →

“duration_limit”和“capacity_limit”只要有一个参数达到阈值，访问日志记录就会停止。 操作步骤 登录 云搜索服务 管理控制台。 在“集群管理”页面选择目标集群，单击操作列“Kibana”，登录Kibana界面。 单击左侧导航栏的“Dev Tools”，执行命令开启访问日志。

查看更多 →

statement_detail_decode(detail text, format text, pretty bool) 解析全量/慢SQL语句中的details字段的信息。 表3 statement_detail_decode参数说明 参数 类型 描述 detail text SQL语句产生的事件的集合(不可读)。

查看更多 →

在文件备份界面，选择“文件备份”页签。单击“备份配置”列下的“配置存储库”。 在“配置存储库”对话框中，选择需要绑定的存储库。如图1所示。 图1 配置存储库 单击“确定”。在资源列表“备份配置”一列可以看到绑定的存储库配置情况。 （可选）如果希望客户端能够自动执行备份，且在创建混合云备份存储库时未

查看更多 →