中软国际数据治理专业服务解决方案实践

数据过滤 算子简介 名称：数据过滤 功能说明：根据设置的条件过滤数据，满足条件的数据则输出，不满足条件的数据将被丢弃。 约束：下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称，对算子进行个性化的命名，以辅助增加可读性。

查看更多 →

String 对比的来源。 job：表示数据同步时的过滤。 compare：表示数据对比的过滤。 枚举值： job compare 表5 filter_conditions字段数据结构说明 参数 是否必选 参数类型 描述 value 否 String 过滤条件。当filtering_ty

查看更多 →

String 当数据过滤校验结果是false，返回校验失败的原因。 source String 对比的来源。 job：表示数据同步时的过滤。 compare：表示数据对比的过滤。 枚举值： job compare target_result String 校验目标库比对条件过滤的结果。 source_result

查看更多 →

条件过滤 为了方便用户对图数据的分析，可以通过设置条件过滤，对图数据进行进一步的过滤分析。 具体操作如下： 进入图引擎编辑器页面，详细操作请参见访问图引擎编辑器。 单击绘图区右侧的，或者在绘图区，选中一个点，单击右键，选择“查看属性”，显示“条件过滤及属性”页面。 在“条件过滤及属性”区，设置条件，然后单击“过滤”。

查看更多 →

下载数据之消费位移 消费位移确认有自动提交与手动提交两种策略，在创建DISKafkaConsumer对象时，通过参数enable.auto.commit设定，true表示自动提交（默认）。 自动提交策略由消费者协调器（Coordinator）每隔${auto.commit.interval

查看更多 →

过滤SELECT WHERE过滤子句 HAVING过滤子句 父主题： Spark SQL语法参考（即将下线）

查看更多 →

击。 URL过滤可以对用户的URL请求进行访问控制，允许或禁止用户进行访问某些网页资源，达到规范上网的目的。 操作步骤 在站点配置页面，选择左侧导航栏的“设备配置 > 路由器 > 路由器全局配置”。 选择“URL过滤”页签，打开“URL过滤”开关，按照表 URL过滤参数完成参数配置。

查看更多 →

产品过滤 算子简介 名称：产品过滤 功能说明：根据IoT 设备接入服务 （IoTDA）定义产品过滤出指定产品ID的设备数据。此算子仅在数据源为IoTDA时使用。 约束： 只允许跟在IoT设备接入数据源算子之后。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明：算子名称

查看更多 →

过滤规则 过滤规则用于配置候选集的过滤方式，使之不进入候选集。对于每个需要过滤的行为，生成用户具有该行为的物品的列表。再对同用户的每种行为的物品列表进行“与”或者“或”的关系，最终生成用户-物品过滤表。 表1 过滤规则参数说明 参数名称 说明 名称 自定义过滤规则名称。由中文、英

查看更多 →

BY进行分组，再在HAVING子句中进行过滤，HAVING子句支持算术运算，聚合函数等。 注意事项 所查询的表必须是已经存在的，否则会出错。 如果过滤条件受GROUP BY的查询结果影响，则不能用WHERE子句进行过滤，而要用HAVING子句进行过滤。 示例 根据字段name对表stu

查看更多 →

配置指纹过滤 您可以通过配置指纹过滤防护规则，对数据包中指定位置的内容进行特征匹配，根据匹配结果设置丢弃或限速规则。 操作步骤 登录管理控制台。 在页面上方选择“区域”后，单击页面左上方的，选择“安全与合规 > DDoS防护 AAD”，进入“Anti-DDoS流量清洗”界面。 在左侧导航栏选择“DDoS原生高级防护

查看更多 →

由目录ID组成的从树根部到节点目录的路径字符串。 datasetType String 数据集数据存储类型。 comment String 数据集备注信息。 source String 数据集来源。 dataAmount String 数据量。 secretLevel String 密级等级。 secretLevelShow

查看更多 →

由目录ID组成的从树根部到节点目录的路径字符串。 datasetType String 数据集数据存储类型。 comment String 数据集备注信息。 source String 数据集来源。 dataAmount String 数据量。 secretLevel String 密级等级。 secretLevelShow

查看更多 →

过滤规则 过滤规则用于配置候选集的过滤方式，使之不进入候选集。过滤规则说明请参见图1。 图1 过滤规则 创建过滤规则 在“创建过滤规则”页面，用户可以对目标数据选择不同策略进行离线计算，得到合适的候选集。 创建过滤规则操作步骤如下： 在“离线作业”下，单击“过滤规则”页签，单击该

查看更多 →

据成为脏数据；或者原始数据满足添加的全部过滤条件，当前行成为脏数据。 条件逻辑为“OR”，如果未添加过滤条件，全部数据成为脏数据；或者原始数据满足任意添加的过滤条件，当前行成为脏数据。 样例 通过“ CS V文件输入”算子，生成两个字段A和B。 源文件如下： 配置“过滤行转换”算子，过滤掉含有test的行。

查看更多 →

过滤查询结果 查询资源列表时（例如，查询API列表），系统支持按照查询对象的属性过滤查询结果。 示例： GET /v1.0/apigw/apis?id=xxxx 父主题： 附录

查看更多 →

据成为脏数据；或者原始数据满足添加的全部过滤条件，当前行成为脏数据。 条件逻辑为“OR”，如果未添加过滤条件，全部数据成为脏数据；或者原始数据满足任意添加的过滤条件，当前行成为脏数据。 样例 通过“CSV文件输入”算子，生成两个字段A和B。 源文件如下： 配置“过滤行转换”算子，过滤掉含有test的行。

查看更多 →

。 在页面右上角根据实际情况选择节点名称和关系类型进行过滤。 可单独选择节点名称或关系类型进行过滤。 如果选择节点名称和关系类型进行过滤，则过滤结果取交集显示。 过滤结果在信息架构图中显示，虚化其他节点与关系连线，展示与过滤结果相关的节点和关系连线。 父主题： 模型目录（新版）

查看更多 →

更多 > 大字段过滤”。 图1 任务列表 在“大字段过滤”对话框中，选择是否使用大字段过滤功能，对同步对象表中的特殊字段（blob、mediumblob、longblob、varbinary、mediumtext、longtext）做处理。 过滤：需要设置字段过滤阈值和替换字符，

查看更多 →

WHERE过滤子句 功能描述 利用WHERE子句过滤查询结果。 语法格式 1 2 SELECT [ALL | DISTINCT] attr_expr_list FROM table_reference WHERE where_condition; 关键字 ALL：返回重复的

查看更多 →

示，过滤规则匹配“source”为“HC.OBS”的事件。 从事件源接收的事件 过滤规则 过滤后的事件 { "events":[{ "id": "4b26115b-778e-11ec-******", "specversion": "1.0", "source":

查看更多 →