当外表参数auto_create_pipe设置为true时，GDS自动创建管道文件可能存在延迟，因此操作管道文件时建议先判断自动创建的管道文件是否存在，且是否为管道文件类型。 GDS管道文件的导入导出任务结束后会自动删除管道文件，但是手动终止任务时，管道文件的删除会有延迟，直到到达超时时间后才会被删除。

查看更多 →

数据源配置中，显示当前管道数据的详细信息，无需配置。 表2 数据源参数说明 参数名称 参数说明 投递类型 数据投递类型，默认显示为PIPE。 区域 当前管道所在区域。 工作空间 当前管道所属的工作空间。 数据空间 当前管道所属的数据空间。 管道 管道的名称 数据位置策略 当前管道中数据位置的策略。

查看更多 →

file_type 'pipe', auto_create_pipe 'false') WRITE ONLY; 导出语句，此时语句会阻塞。 1 INSERT INTO foreign_test_pipe_tw select * from test_pipe; 通过管道文件将数据从GDS导出。

查看更多 →

/***/gds_data/ 创建管道文件，如果auto_create_pipe设置为true跳过此步骤： mkfifo foreign_test_pipe.pipe; 管道文件创建完成后，每执行完一次操作，业务会被自动清理。如果还需要执行其他业务，请参考该步骤重新创建管道文件。 向管道文件中写入数据：

查看更多 →

管道管理 创建数据管道 父主题： API

查看更多 →

数据空间ID 当前管道所属数据空间的ID。 管道名称 当前管道的名称。 管道ID 当前管道的ID。 Shard数 管道的Shard数。 生命周期 管道内数据保存周期。 创建时间 管道的创建时间。 描述 管道的描述信息。 编辑管道 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。

查看更多 →

String 数据空间id dataspace_name String 数据空间名称 pipe_id String 管道id pipe_name String 管道名称 pipe_type String 管道类型（system-defined，系统预定义)、1（user-defined，用户自定义)

查看更多 →

删除管道作业 功能介绍 删除用户指定的管道作业 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI DELETE /v1/{project_id}/pipelines/{pipeline_id}

查看更多 →

数据管道 创建数据管道 编辑处理流程 调试数据管道 运行数据管道 算子使用指南

查看更多 →

停止管道作业 功能介绍 停止一个正在运行中的管道作业 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v1/{project_id}/pipelines/{pipeline_id}/stop

查看更多 →

管道服务安装 单机部署时管道服务不需要安装，多机部署时则部署至规划好的管道 服务器 上面 管道服务安装全部使用普通用户，执行：su - dce 上传dce-flow-plane-pipeline-svcs-x.y.m.n.tar.gz安装包到/home/dce下 解压 tar -zxvf

查看更多 →

管道服务安装 单机部署时管道服务不需要安装，多机部署时则部署至规划好的管道服务器上面 管道服务安装全部使用普通用户，执行：su - dpe 上传dpe-flow-plane-pipeline-svcs-x.y.m.n.tar.gz安装包到/home/dpe下 解压tar -zxvf

查看更多 →

pipeline_id 是 String 管道ID 最小长度：1 最大长度：100 表2 Query参数 参数 是否必选 参数类型 描述 parallel 否 Integer 运行管道的并发度 最小值：0 最大值：1000 rtu 否 Integer 运行管道的RTU个数 最小值：2 最大值：3

查看更多 →

更新管道作业 功能介绍 更新管道作业时，需要在URL中指定是更新哪一个作业，将在body中附带完整的作业信息。（管道作业详细配置，每个作业可选择不同的算子进行组合，各算子的使用方法详见：数据管道算子使用指南。） check参数表示是否需要对作业配置进行检查，若为false，则不检

查看更多 →

设置auto_create_pipe参数时，file_type必须设置为pipe，否则不能成功创建外表。 auto_create_pipe设置为false，执行导入导出时，若未指定管道文件，会打开“数据库名_模式名_外表名.pipe”文件；若已指定管道文件，会打开location参数中指定的管道文件。

查看更多 →

OTDA_API类型。管道作业详细配置（管道作业详细配置，每个作业可选择不同的算子进行组合，各算子的使用方法详见：数据管道算子使用指南。） 响应参数 状态码： 201 表5 响应Body参数 参数 参数类型 描述 pipeline_id String 管道ID 最小长度：1 最大长度：100

查看更多 →

json、plain 云脑管道 Pipe json、plain ElasticSearch CSS json、plain 日志从安全云脑转出 传输控制协议 TCP json 用户数据协议 UDP json 消息队列 Kafka json 对象存储 OBS json 云脑管道 Pipe json 父主题：

查看更多 →

配置说明 连接方式 选择“目的”。 连接类型 选择“云脑管道（Pipe）”。 名称 自定义设置数据连接目的名称。 描述 自定义设置日志数据目的描述信息。 类型 自定义设置日志目的类型。 管道 选择（可选）步骤八：创建日志存储管道创建的管道。 域账户 输入当前登录Console的IAM账号的域账户信息。

查看更多 →

设置auto_create_pipe参数时，file_type必须设置为pipe或者interconn，否则不能成功创建外表。 auto_create_pipe设置为false，执行导入导出时，若未指定管道文件，会打开“数据库名_模式名_外表名.pipe”文件；若已指定管道文件，会打开loc

查看更多 →

默认值：50 --pipe-timeout 设置GDS操作管道文件的等待超时时间。 该参数的设置是为了避免人为或程序自身问题造成管道文件的一端长时间不读取或者不写入，导致管道另一端的读取或写入操作hang住。 该参数表示的超时时间不是指GDS一个导入导出任务的最长时间，而是GDS对管道文件的

查看更多 →

创建数据管道 使用IoTDA数据源 使用DIS数据源 其他数据源的使用 父主题： 数据管道

查看更多 →