中软国际数据治理专业服务解决方案实践

数据过滤 算子简介 名称：数据过滤 功能说明：根据设置的条件过滤数据，满足条件的数据则输出，不满足条件的数据将被丢弃。 约束：下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称，对算子进行个性化的命名，以辅助增加可读性。

查看更多 →

下载数据之消费位移 消费位移确认有自动提交与手动提交两种策略，在创建DISKafkaConsumer对象时，通过参数enable.auto.commit设定，true表示自动提交（默认）。 自动提交策略由消费者协调器（Coordinator）每隔${auto.commit.interval

查看更多 →

String 对比的来源。 job：表示数据同步时的过滤。 compare：表示数据对比的过滤。 枚举值： job compare 表5 filter_conditions字段数据结构说明 参数 是否必选 参数类型 描述 value 否 String 过滤条件。当filtering_ty

查看更多 →

String 当数据过滤校验结果是false，返回校验失败的原因。 source String 对比的来源。 job：表示数据同步时的过滤。 compare：表示数据对比的过滤。 枚举值： job compare target_result String 校验目标库比对条件过滤的结果。 source_result

查看更多 →

过滤SELECT WHERE过滤子句 HAVING过滤子句 父主题： Spark SQL语法参考（即将下线）

查看更多 →

条件过滤 为了方便用户对图数据的分析，可以通过设置条件过滤，对图数据进行进一步的过滤分析。 具体操作如下： 进入图引擎编辑器页面，详细操作请参见访问图引擎编辑器。 单击绘图区右侧的，或者在绘图区，选中一个点，单击右键，选择“查看属性”，显示“条件过滤及属性”页面。 在“条件过滤及属性”区，设置条件，然后单击“过滤”。

查看更多 →

虫等威胁攻击。 URL过滤可以对用户的URL请求进行访问控制，允许或禁止用户进行访问某些网页资源，达到规范上网的目的。 操作步骤 在站点配置页面，选择左侧导航栏的“设备配置 > 路由器 > 路由器全局配置”。 选择“URL过滤”页签，打开“URL过滤”开关，按照表1完成参数配置。

查看更多 →

过滤规则 过滤规则用于配置候选集的过滤方式，使之不进入候选集。对于每个需要过滤的行为，生成用户具有该行为的物品的列表。再对同用户的每种行为的物品列表进行“与”或者“或”的关系，最终生成用户-物品过滤表。 表1 过滤规则参数说明 参数名称 说明 名称 自定义过滤规则名称。由中文、英

查看更多 →

BY进行分组，再在HAVING子句中进行过滤，HAVING子句支持算术运算，聚合函数等。 注意事项 所查询的表必须是已经存在的，否则会出错。 如果过滤条件受GROUP BY的查询结果影响，则不能用WHERE子句进行过滤，而要用HAVING子句进行过滤。 示例 根据字段name对表stu

查看更多 →

产品过滤 算子简介 名称：产品过滤 功能说明：根据IoT 设备接入服务 （IoTDA）定义产品过滤出指定产品ID的设备数据。此算子仅在数据源为IoTDA时使用。 约束： 只允许跟在IoT设备接入数据源算子之后。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称

查看更多 →

过滤规则 过滤规则用于配置候选集的过滤方式，使之不进入候选集。过滤规则说明请参见图1。 图1 过滤规则 创建过滤规则 在“创建过滤规则”页面，用户可以对目标数据选择不同策略进行离线计算，得到合适的候选集。 创建过滤规则操作步骤如下： 在“离线作业”下，单击“过滤规则”页签，单击该

查看更多 →

。 在页面右上角根据实际情况选择节点名称和关系类型进行过滤。 可单独选择节点名称或关系类型进行过滤。 如果选择节点名称和关系类型进行过滤，则过滤结果取交集显示。 过滤结果在信息架构图中显示，虚化其他节点与关系连线，展示与过滤结果相关的节点和关系连线。 父主题： 模型目录（新版）

查看更多 →

过滤查询结果 查询资源列表时（例如，查询API列表），系统支持按照查询对象的属性过滤查询结果。 示例： GET /v1.0/apigw/apis?id=xxxx 父主题： 附录

查看更多 →

据成为脏数据；或者原始数据满足添加的全部过滤条件，当前行成为脏数据。 条件逻辑为“OR”，如果未添加过滤条件，全部数据成为脏数据；或者原始数据满足任意添加的过滤条件，当前行成为脏数据。 样例 通过“ CS V文件输入”算子，生成两个字段A和B。 源文件如下： 配置“过滤行转换”算子，过滤掉含有test的行。

查看更多 →

据成为脏数据；或者原始数据满足添加的全部过滤条件，当前行成为脏数据。 条件逻辑为“OR”，如果未添加过滤条件，全部数据成为脏数据；或者原始数据满足任意添加的过滤条件，当前行成为脏数据。 样例 通过“CSV文件输入”算子，生成两个字段A和B。 源文件如下： 配置“过滤行转换”算子，过滤掉含有test的行。

查看更多 →

由目录ID组成的从树根部到节点目录的路径字符串。 datasetType String 数据集数据存储类型。 comment String 数据集备注信息。 source String 数据集来源。 dataAmount String 数据量。 secretLevel String 密级等级。 secretLevelShow

查看更多 →

由目录ID组成的从树根部到节点目录的路径字符串。 datasetType String 数据集数据存储类型。 comment String 数据集备注信息。 source String 数据集来源。 dataAmount String 数据量。 secretLevel String 密级等级。 secretLevelShow

查看更多 →

添加包过滤策略 根据网络数据包的五元组（源IP、源端口、目的IP、目的端口、协议）与配置规则进行匹配，根据匹配规则的操作，进行数据包的放行或阻断。 约束与限制 包过滤策略只支持桥接代理模式，其他模式下请勿进行相关配置。 操作步骤 使用系统管理员sysadmin账号登录数据库运维管理系统。

查看更多 →

带过滤的n_paths算法（filtered_n_paths） 概述 带过滤的n_paths算法是给定起始点source、目的点target、跳数k、路径数n、过滤条件filters，找出source和target间不多于n条的k跳无环路径。 适用场景 任意网络。 参数说明 表1

查看更多 →

labels labels和edgeFilters两者必选其一 String 关系类型过滤条件。 edgeFilters labels和edgeFilters两者必选其一 String 过滤条件，按属性过滤，JsonArray格式字符串。 offset 否 Integer 本次请求的起始位置。

查看更多 →

带过滤的n_paths算法（filtered_n_paths）(2.2.22) 概述 带过滤的n_paths算法是给定起始点source、目的点target、跳数k、路径数n、过滤条件filters，找出source和target间不多于n条的k跳无环路径。 算法名称：带过滤的n_paths

查看更多 →