中软国际数据治理专业服务解决方案实践

DIS输出 算子简介 名称： DIS输出，IoT数据分析服务仅在华为云部署形态支持DIS数据源 功能说明： 数据输出到DIS云服务。 约束：下游不允许接任何算子。 算子配置 基础配置项 算子名称： 配置项英文名：name 说明： 算子名称，对算子进行个性化的命名，以辅助增加可读性

查看更多 →

E CS " } output 关键字后的标签为输出变量的名称，该名称必须是有效的标识符。output块中主要包括以下参数： value：必选项，输出变量的值，任何有效的表达式都可作为输出使用。 description：输出变量的描述信息，用于描述输出变量的用途。 output "vpc_id"

查看更多 →

程序输出 代码片段描述 缩写 扩展内容 将表达式发送到标准输出 “print” print(my_expression) 父主题： 后缀片段

查看更多 →

输出算子 Hive输出 Spark输出 表输出 文件输出 HBase输出 ClickHouse输出 父主题： 算子帮助

查看更多 →

文件输出 概述 “文件输出”算子，用于配置已生成的字段通过分隔符连接并输出到文件。 输入与输出 输入：需要输出的字段 输出：文件 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 输出分隔符 配置分隔符。 string 是 无 换行符 用户根据数据实际情况，填写字

查看更多 →

Spark输出 概述 “Spark输出”算子，用于配置已生成的字段输出到SparkSQL表的列。 输入与输出 输入：需要输出的字段 输出：SparkSQL表 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 Spark文件存储格式 配置SparkSQL表文件的存储

查看更多 →

heap_blks_read bigint 从此表中读取的磁盘块数。 heap_blks_hit bigint 此表缓冲区命中数。 idx_blks_read bigint 从表中所有索引读取的磁盘块数。 idx_blks_hit bigint 表中所有索引命中缓冲区数。 toast_blks_read bigint

查看更多 →

查询execution输出 功能介绍 查询执行结果的输出。 URI GET /v1/executions/{execution_id}/outputs 请求消息 表1 参数说明 参数 是否必选 参数类型 描述 execution_id 是 String 执行结果ID，即创建execution接口返回值。

查看更多 →

获取项目输出 功能介绍 该接口用于查询项目的北向输出。 URI URI格式 GET /softcomai/datalake/dataplan/v1.0/north/progress/output?progressId={progressId}&type={type} 参数说明 参数名

查看更多 →

输出模块 构造一个用于输出的显示器 输出一帧图片 上传文件 上传缓冲区数据 发送消息 播放音频文件 示例-输出

查看更多 →

创建输出流 CloudTable HBase输出流 CloudTable OpenTSDB输出流 MRS OpenTSDB输出流 CSS Elasticsearch输出流 DCS输出流 DDS输出流 DIS输出流 DMS输出流 DWS输出流（通过JDBC方式） DWS输出流（通过OBS转储方式）

查看更多 →

SMN输出流 功能描述 DLI 将Flink作业的输出数据输出到消息通知服务（SMN）中。 消息通知服务（Simple Message Notification，简称SMN）为DLI提供可靠的、可扩展的、海量的消息处理服务，它大大简化系统耦合，能够根据用户的需求，向订阅终端主动推送

查看更多 →

的全托管式的Kafka消息队列。 DLI支持将作业的输出数据输出到DMS的Kafka实例中。创建DMS Kafka输出流的语法与创建开源Apache Kafka输出流一样，具体请参见MRS Kafka输出流。 父主题： 创建输出流

查看更多 →

标准输出配置 通过添加指定采集容器标准输出标签，用户可以指定采集pod下的对应容器名的标准输出日志。用户在pod的yaml中spec:template:metadata:annotations:字段增加以下字段来实现指定要采集的容器名称。 kubernetes.AOM.log.stdout:

查看更多 →

DIS输出流 功能描述 DLI将Flink作业的输出数据写入数据接入服务（DIS）中。适用于将数据过滤后导入DIS通道，进行后续处理的场景。 数据接入服务（Data Ingestion Service，简称DIS）为处理或分析流数据的自定义应用程序构建数据流管道，主要解决云服务外

查看更多 →

RDS输出流 功能描述 DLI将Flink作业的输出数据输出到关系型数据库（RDS）中。目前支持PostgreSQL和MySQL两种数据库。PostgreSQL数据库可存储更加复杂类型的数据，支持空间信息服务、多版本并发控制（MVCC）、高并发，适用场景包括位置应用、金融保险、互

查看更多 →

ClickHouse输出 概述 “ClickHouse输出”算子，用于配置已生成的字段输出到ClickHouse表的列。 输入与输出 输入：需要输出的字段 输出：ClickHouse表 参数说明 表1 算子参数说明 参数 含义 类型 是否必填 默认值 数据库名 配置ClickHouse表所在的数据库

查看更多 →

numeric 此表的TOAST表读取的磁盘块数（如果存在）。 toast_blks_hit numeric 此表的TOAST表命中缓冲区数（如果存在）。 tidx_blks_read numeric 此表的TOAST表索引读取的磁盘块数（如果存在）。 tidx_blks_hit

查看更多 →

Linux块迁移，配置数据是否压缩？ 场景描述 Linux块迁移默认启用压缩功能，根据源端资源占用的情况配置迁移过程中采用的压缩线程个数（默认设置为当前空闲CPU核数的数量，最大数量不超过3），可能会存在压缩导致CPU资源占用过高的情况，可以在 SMS 控制台配置目的端时，设置压缩线程个数或关闭压缩功能。

查看更多 →

toast_blks_read bigint 该表的TOAST表读取的磁盘块数（如果存在）。 toast_blks_hit bigint 该表的TOAST表命中缓冲区数（如果存在）。 tidx_blks_read bigint 该表的TOAST表索引读取的磁盘块数（如果存在）。 tidx_blks_hit bigint

查看更多 →

toast_blks_read bigint 该表的TOAST表读取的磁盘块数（如果存在）。 toast_blks_hit bigint 该表的TOAST表命中缓冲区数（如果存在）。 tidx_blks_read bigint 该表的TOAST表索引读取的磁盘块数（如果存在）。 tidx_blks_hit bigint

查看更多 →