使用Ranger时适配第三方JDK 使用Spark小文件合并工具说明 使用Spark小文件合并工具说明 配置流式读取Spark Driver执行结果 配置Spark Executor退出时执行自定义代码 配置Spark动态脱敏 distinct聚合优化 配置Spark作业失败时清理残留文件

查看更多 →

勾选目录的复选框，单击页面上方的“操作”，单击“存储策略”。 图1 存储策略 在弹出的对话框中设置新的存储策略，单击“确定”。 在“静态存储策略”页签设置静态存储策略，单击“保存”。 在“动态存储策略”页签可创建、删除、修改动态存储策略，详细的参数介绍如表2所示。 表2 动态存储策略参数介绍 分类 参数

查看更多 →

单个表的数据文件block大小可以通过TBLPROPERTIES进行定义，系统会选择数据文件实际大小和设置的blocksize大小中的较大值，作为该数据文件在HDFS上存储的实际blocksize大小。单位为MB，默认值为1024MB，范围为1MB~2048MB。若设置值不在[1, 2048]之间，系统将会报错。

查看更多 →

单个表的数据文件block大小可以通过TBLPROPERTIES进行定义，系统会选择数据文件实际大小和设置的blocksize大小中的较大值，作为该数据文件在HDFS上存储的实际blocksize大小。单位为MB，默认值为1024MB，范围为1MB~2048MB。如果设置值不在[1, 2048]之间，系统将会报错。

查看更多 →

优化与提升 ModelArts开发支持服务 数据库开发支持服务 AI使能优化服务与提升服务 大数据优化与提升服务 应用现代化服务 物联网优化与提升服务 存储安全优化与提升服务 云存储优化与提升服务 数据仓库 优化与支持服务

查看更多 →

搜索优化功能 启用百度主动推送操作指导 在百度站长平台验证网站操作指导 在百度站长平台获取秘钥操作指导 启用百度自动推送操作指导 启用网站sitemap操作指导 临时关闭网站操作指导 启用404页面操作指导 启用Nofollow操作指导 启用301重定向操作指导 启用网站html静态化操作指导

查看更多 →

分子优化（MO） 新建分子优化任务接口 查询分子优化任务 父主题： API（AI辅助药物设计）

查看更多 →

靶点优化 靶点优化基于分子动力学模拟和结构聚类，实现靶点结构优化 单击“靶点优化”功能卡片，进入配置页面。 配置靶点文件和相关参数信息。 靶点文件：支持PDB格式文件，文件大小不能超过10M。若文件中含有多个受体，默认只处理第一个。 靶点预处理： 去配体：提交任务时系统会自动删除配体。

查看更多 →

优化过程（Windows） 云服务器 的正常运行依赖于XEN Guest OS driver（PV driver）和KVM Guest OS driver（virtio驱动），为了同时支持XEN虚拟化和KVM虚拟化，以及提升云 服务器 网络性能，需要确保镜像安装了PV driver和virtio驱动。

查看更多 →

内存优化型 内存优化型实例类型总览 内存优化型云服务器擅长应对大型内存数据集和高网络场景。适用于内存要求高，数据量大并且数据访问量大，同时要求快速的数据交换和处理。例如广告精准营销、电商、车联网等大数据分析场景。 该类型 弹性云服务器 默认开启超线程，每个vCPU对应一个底层超线程HT（Hyper-Threading）。

查看更多 →

配置HDFS用户访问HDFS文件权限 配置HDFS目录权限 默认情况下，某些HDFS的文件目录权限为777或者750，存在安全风险。建议您在安装完成后修改该HDFS目录的权限，增加用户的安全性。 在HDFS客户端中，使用具有HDFS管理员权限的用户，执行如下命令，将“/user”的目录权限进行修改。

查看更多 →

配置HDFS用户访问HDFS文件权限 配置HDFS目录权限 默认情况下，某些HDFS的文件目录权限为777或者750，存在安全风险。建议您在安装完成后修改该HDFS目录的权限，增加用户的安全性。 在HDFS客户端中，使用具有HDFS管理员权限的用户，执行如下命令，将“/user”的目录权限进行修改。

查看更多 →

RENAME TO ${new_table_name};来将表重命名。这样就可以新建一个和原来一样表。 执行hdfs dfs -rm -r -f ${hdfs_path}在HDFS上删除表数据。 在Hive中用alter table ${Table_Name} drop partition

查看更多 →

将算例文件放到NAS存储中，华为云SFS Turbo提供按需扩展的高性能文件存储，并针对HPC有优化，建议直接使用华为云SFS Turbo存放算例文件。 HPC仿真软件STAR-CCM+需要每个节点都安装，比较麻烦，可以将STAR-CCM+直接安装在NAS存储中，每个节点直接将N

查看更多 →

PERF05-04 大数据场景资源优化 风险等级 中 关键策略 在大数据场景下，可以通过优化资源的使用和分配，提高系统的性能和效率。以下是一些常见的大数据场景资源优化方法： 分布式存储：使用分布式存储系统，如Hadoop HDFS、Apache Cassandra等，将数据分散存储在多个节点上，以提高数据的可靠性和可扩展性。

查看更多 →

待迁移的存量数据及数据量统计 如果使用HDFS作为文件存储系统，可以通过客户端执行hadoop fs -du -h HDFS文件目录命令统计路径下的文件大小。 表4 现有数据量统计 大数据组件 待迁移数据的路径 数据量大小 文件个数或表个数 HDFS/OBS（或其他文件存储系统） /user/helloworld

查看更多 →

使用容量优化 选择“服务列表 > 管理与监管 > 优化顾问”优化顾问服务页面。 左侧导航树选择“容量优化”。 页签默认为“风险识别”，点击“配置”。 图1 点击“编辑”，进行风险分析配置。当前支持自定义预测和智能预测两种模式。 1） 自定义预测：一种峰值预测的方式，根据输入预测峰值找出风险实例

查看更多 →

创建用户并授权使用优化顾问服务 创建用户并授权使用优化顾问服务 如果您需要对您所拥有的优化顾问服务进行精细的权限管理，您可以使用统一身份认证服务（Identity and Access Management，简称IAM），通过IAM，您可以： 根据企业的业务组织，在您的华为云帐号

查看更多 →

业务优化建议 场景描述 您可以根据终端用户的按键轨迹和按键次数等，给出对当前IVR流程的优化建议，可以用作优化流程的参考。 前提条件 您必须具有“IVR分析 > 业务优化建议”的菜单权限。 您的租间需开启IVR分析特性、智能IVR特性。 被分析的机器人流程需存在接入码。 被分析机

查看更多 →

内存优化型 概述 内存优化型类别的专属主机适合处理内存中的大型数据集，搭载Intel Xeon SkyLake全新一代CPU，同时搭载全新网络加速引擎，以及DPDK（Data Plane Development Kit）快速报文处理机制，提供更高的网络性能，提供最大512GB基于

查看更多 →

合并CBO优化 操作场景 Spark SQL默认支持基于规则的优化，但仅仅基于规则优化不能保证Spark选择合适的查询计划。CBO（Cost-Bsed Optimizer）是一种为SQL智能选择查询计划的技术。通过配置开启CBO后，CBO优化器可以基于表和列的统计信息，进行一系列的估算，最终选择出合适的查询计划。

查看更多 →