中软国际数据治理专业服务解决方案实践

数据过滤 算子简介 名称：数据过滤 功能说明：根据设置的条件过滤数据，满足条件的数据则输出，不满足条件的数据将被丢弃。 约束：下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称，对算子进行个性化的命名，以辅助增加可读性。

查看更多 →

String 对比的来源。 job：表示数据同步时的过滤。 compare：表示数据对比的过滤。 枚举值： job compare 表5 filter_conditions字段数据结构说明 参数 是否必选 参数类型 描述 value 否 String 过滤条件。当filtering_ty

查看更多 →

String 当数据过滤校验结果是false，返回校验失败的原因。 source String 对比的来源。 job：表示数据同步时的过滤。 compare：表示数据对比的过滤。 枚举值： job compare target_result String 校验目标库比对条件过滤的结果。 source_result

查看更多 →

rk中的DataFrame类型对象，为数据集过滤结果 参数说明 参数 是否必选 参数说明 默认值 column_name 是 列名，对该列按照过滤条件进行数据集的行过滤，不同列之间用分号分隔 无 condition_map_str 是 过滤条件组装后的格式化字符串，格式参考："!=:filter_value;IS

查看更多 →

条件过滤 为了方便用户对图数据的分析，可以通过设置条件过滤，对图数据进行进一步的过滤分析。 具体操作如下： 进入图引擎编辑器页面，详细操作请参见访问图引擎编辑器。 单击绘图区右侧的，或者在绘图区，选中一个点，单击右键，选择“查看属性”，显示“条件过滤及属性”页面。 在“条件过滤及属性”区，设置条件，然后单击“过滤”。

查看更多 →

过滤SELECT WHERE过滤子句 HAVING过滤子句 父主题： Spark SQL语法参考（即将下线）

查看更多 →

击。 URL过滤可以对用户的URL请求进行访问控制，允许或禁止用户进行访问某些网页资源，达到规范上网的目的。 操作步骤 在站点配置页面，选择左侧导航栏的“设备配置 > 路由器 > 路由器全局配置”。 选择“URL过滤”页签，打开“URL过滤”开关，按照表 URL过滤参数完成参数配置。

查看更多 →

产品过滤 算子简介 名称：产品过滤 功能说明：根据IoT 设备接入服务 （IoTDA）定义产品过滤出指定产品ID的设备数据。此算子仅在数据源为IoTDA时使用。 约束： 只允许跟在IoT设备接入数据源算子之后。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称

查看更多 →

需要过滤停用词字段内部的分隔符 " " 样例 输入数据-待过滤文本 id,sentence 1,停用词 过滤 是 自然言语处理 中 一个 重要 的 步骤 。 输入数据-停用词 noise 。 是 中 一个 配置流程 运行流程 算法参数设置 查看结果 id,sentence 1,停用词

查看更多 →

表格 表格图 交叉表格 热力图 父主题： 仪表板可视化控件

查看更多 →

汇总：开启“显示汇总行”开关后，将表格中所有数字输入框类型的字段求和。 设置表格数据 通过数据集设置表格组件中需要展示的数据。 在看板“页面构建”页面，从左侧组件库拖拽“表格”组件至中间画布中。 图2 新建数据集 选择表格组件需展示的数据集。 在右侧属性“数据范围”处单击“选择数据源”，在“选择数据集”弹窗中选择数据集。具体操作请参见数据集。

查看更多 →

过滤规则 过滤规则用于配置候选集的过滤方式，使之不进入候选集。对于每个需要过滤的行为，生成用户具有该行为的物品的列表。再对同用户的每种行为的物品列表进行“与”或者“或”的关系，最终生成用户-物品过滤表。 表1 过滤规则参数说明 参数名称 说明 名称 自定义过滤规则名称。由中文、英

查看更多 →

BY进行分组，再在HAVING子句中进行过滤，HAVING子句支持算术运算，聚合函数等。 注意事项 所查询的表必须是已经存在的，否则会出错。 如果过滤条件受GROUP BY的查询结果影响，则不能用WHERE子句进行过滤，而要用HAVING子句进行过滤。 示例 根据字段name对表stu

查看更多 →

配置指纹过滤 您可以通过配置指纹过滤防护规则，对数据包中指定位置的内容进行特征匹配，根据匹配结果设置丢弃或限速规则。 操作步骤 登录管理控制台。 在页面上方选择“区域”后，单击页面左上方的，选择“安全与合规 > DDoS防护 AAD”，进入“Anti-DDoS流量清洗”界面。 在左侧导航栏选择“DDoS原生高级防护

查看更多 →

、区间结束值。 过滤：如果您的数据量较大，可以启用过滤器功能，将需要的某一类或者某几类数据从数据集中过滤出来。过滤器可以过滤字符类、数值类和日期类的数据。 过滤设置：单击过滤内的需要设置过滤字段上的，进入设置过滤器页面。 过滤字段选择维度 非时间字段 表1 过滤器参数 参数 参数说明

查看更多 →

表格 表格是一个组合组件，是由表格和分页两部分组成。用于展示单表或多表关联数据。 在表单开发页面，从管理视图的“图表组件”中拖拽“表格”组件至表单设计区域，分为表格和分页上下两部分。如图1。 图1 表格 表格 基础设置 表格名称：当前表格组件的名称。 数据范围：设置表格中需展示的

查看更多 →

表格 查询分析结果可以通过表格形式进行展示。 表格为最常见的数据展示类型，通过对数据的整理，可以快速对数据进行分析。在安全云脑中，通过查询分析语句得到的数据结果在图标统计中，默认以表格形式进行展示。 操作步骤 登录管理控制台。 在页面左上角单击，选择“安全与合规 > 安全云脑 S

查看更多 →

- - √ 8 测试数据 提供表格的测试数据 代码编辑器 - - √ 9 表格数据 提供表格的默认数据 代码编辑器 - - √ 10 查询数据的方法 获取表格数据的方法 代码编辑器 - - √ 11 分页配置 配置表格的分页功能 代码编辑器 - - √ 12 表格列 选中模型后展示全部的表格列

查看更多 →

添加字段：表格的列，当表格组件绑定了数据模型后，可选择绑定的模型中的字段成为表格的列，以及表格的查询条件。 添加操作列：表格的列，在表格中添加可操作列，即在操作列中通过添加图标，并为图标添加onclick事件代码，实现某些功能，如删除、编辑等。 添加空白列：表格的列，可添加表格空白列。

查看更多 →

过滤规则 过滤规则用于配置候选集的过滤方式，使之不进入候选集。过滤规则说明请参见图1。 图1 过滤规则 创建过滤规则 在“创建过滤规则”页面，用户可以对目标数据选择不同策略进行离线计算，得到合适的候选集。 创建过滤规则操作步骤如下： 在“离线作业”下，单击“过滤规则”页签，单击该

查看更多 →

据成为脏数据；或者原始数据满足添加的全部过滤条件，当前行成为脏数据。 条件逻辑为“OR”，如果未添加过滤条件，全部数据成为脏数据；或者原始数据满足任意添加的过滤条件，当前行成为脏数据。 样例 通过“ CS V文件输入”算子，生成两个字段A和B。 源文件如下： 配置“过滤行转换”算子，过滤掉含有test的行。

查看更多 →