output为字典类型，output_port_1为pyspark中的DataFrame类型对象，为分层采样结果。 参数说明 参数 是否必选 参数说明 默认值 strata_col 是 分层列, 按此列进行分层采样。 无 sample_size 否 采样个数。为整数时：表示每个层的采样个数；为字符串时：格式为strata0:n0

查看更多 →

配置Hadoop安全参数 设置安全通道加密 默认情况下，组件间的通道是不加密的。您可以配置如下参数，设置安全通道是加密的。 参数修改入口：在 FusionInsight Manager系统中，选择“集群 > 待操作集群的名称 > 服务 > 服务名 > 配置”，展开“全部配置”页签。在搜索框中输入参数名称。

查看更多 →

”，可以在“DataModeling”下新建子分层。 在“新增数据分层”界面，输入分层名称和描述信息、选择密级设置信息。 单击“确认”。 在“确认”对话框中单击“确定”。 （可选）选择已新建的分层，重复执行3~6，可以创建多级分层。 （可选）对已有分层，可以执行如下操作。 编辑分层：选择需要编辑的分层，单击。 删除分层：选择需要删除的分层，单击。

查看更多 →

C授权。用户在部署安全集群时，需要使用安全加密通道，配置如下参数。安全Hadoop RPC相关信息请参考： MRS 3.2.0之前版本：https://hadoop.apache.org/docs/r3.1.1/hadoop-project-dist/hadoop-common/SecureMode

查看更多 →

在对应特性集中可查看到新建的二级分层目录特性集。 二级分层目录可再创建三级分层目录，以此类推，最多可创建十级分层目录。 系统支持对分层目录的编辑和删除操作。 父主题： 特性（FE）

查看更多 →

在对应特性集中可查看到新建的二级分层目录特性集。 二级分层目录可再创建三级分层目录，以此类推，最多可创建十级分层目录。 系统支持对分层目录的编辑和删除操作。 父主题： 特性（FE）

查看更多 →

org/repos/dist/release/hadoop/common/中下载Hadoop的样例程序。 例如，选择hadoop-x.x.x版本，下载“hadoop-x.x.x.tar.gz”，解压后在“hadoop-x.x.x\share\hadoop\mapreduce”路径下获取“hadoop-mapreduce-examples-x

查看更多 →

SQL on Hadoop DWS支持直接读取存储在Hadoop HDFS文件系统上的结构化数据，对外提供标准SQL语言查询接口，通过向量化引擎完成Hadoop原生数据的复杂分析查询工作。 技术架构 DWS将HDFS上存储的结构化数据映射为外部表，从而重用已有的成熟数据库SQL编

查看更多 →

存储配置 参数 描述 默认值 hoodie.parquet.max.file.size Hudi写阶段生成的parquet文件的目标大小。对于DFS，这需要与基础文件系统块大小保持一致，以实现最佳性能。 120 * 1024 * 1024 byte hoodie.parquet.block

查看更多 →

种），完成RPC授权。用户在部署安全集群时，需要使用安全加密通道，配置如下参数。安全Hadoop RPC相关信息请参考： https://hadoop.apache.org/docs/r3.1.1/hadoop-project-dist/hadoop-common/SecureMode

查看更多 →

使用）。 下载hadoop-3.1.1.tar.gz，并解压到/opt/hadoop-3.1.1目录。 在/etc/profile文件中增加配置内容： export HADOOP_HOME=/opt/hadoop-3.1.1 export PATH=$HADOOP_HOME/bi

查看更多 →

org/repos/dist/release/hadoop/common/中下载Hadoop的样例程序。 例如，选择hadoop-x.x.x版本，下载“hadoop-x.x.x.tar.gz”，解压后在“hadoop-x.x.x\share\hadoop\mapreduce”路径下获取“hadoop-mapreduce-examples-x

查看更多 →

种权限。 图3 存储桶配置 （可选）单击“添加挂载路径”，可配置多条挂载路径。 单击“确定”，完成存储桶配置。 在“云存储配置”页面中可查看配置好的存储桶。 使配置生效。 如已完成组件部署，单击页面上方“生效配置”。在右侧弹框中确认配置信息，并单击“确定”，使配置生效。 如未完成

查看更多 →

在“云服务监控”页面，勾选需要“配置数据存储”的云服务资源，单击“批量配置数据存储”，进入“批量配置数据存储”页面。 或在“主机监控”页面，勾选需要“配置数据存储” 弹性云服务器 ，单击“批量配置数据存储”，进入“批量配置数据存储”页面。 在“配置数据存储”或“批量配置数据存储”页面，按照表1配置参数： 表1

查看更多 →

配置云存储 云存储说明 配置并行文件系统 配置存储桶 配置通用型文件系统 编辑云存储挂载 删除云存储挂载 父主题： 组件配置

查看更多 →

单击配置数据存储，弹出配置数据存储页面。 图1 配置数据存储 在如图2所示的计算单元列表中，找到所需查看的计算单元，单击“配置数据存储”为该计算单元配置监控数据的存储路径。 在弹出的“配置数据存储”页面，配置如下参数，然后单击“确定”。 表1 数据存储参数说明 参数名称 说明 样例

查看更多 →

快速购买Hadoop分析集群 本章节为您介绍如何快速购买一个Hadoop分析集群，Hadoop集群完全使用开源Hadoop生态，采用YARN管理集群资源，提供Hive、Spark离线大规模分布式数据存储和计算，SparkStreaming、Flink流式数据计算，Presto交互

查看更多 →

数据库访问实现权限分层 GaussDB (DWS)中可以使用Database和Schema实现业务的隔离，区别在于： Database之间无法直接互访，通过连接隔离实现彻底的权限隔离。各个Database之间共享资源极少，可实现连接隔离、权限隔离等。 Schema隔离的方式共用资源

查看更多 →

WeLink 管理后台配置管理员角色，结合“考勤组负责人”角色，不同角色分别对应特定的功能 √ √ √ 数据权限 WeLink管理后台可针对管理员角色配置管理的部门 √ √ √ 可见范围配置 WeLink管理后台可对部分员工、全部员工、特定角色、管理员角色配置可见权限 √ √ √ 接口

查看更多 →

便进行数据文件的操作。 配置说明 参考进入租户管理员配置界面进入租户管理员配置界面，在租户管理员界面上，单击“连接器配置”下的“OBS”，跳转到OBS列表页。 单击“新建”。 参考界面和表1配置必选参数。 表1 OBS存储配置参数说明 字段 说明 如何配置 基本信息 名称 OBS连接器的名称，用户自定义。

查看更多 →

配置HDFS存储策略 功能简介 为HDFS上某个文件或文件夹指定存储策略。 代码样例 登录FusionInsight Manager页面，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 配置 > 全部配置”。 搜索并查看“dfs.storage.policy.ena

查看更多 →