创建存储 在数据管道中配置存储输出算子时，如果未选择已有存储，则将创建新的存储。在数据管道中通过存储输出算子创建的存储将会展示在存储管理中的对应的存储组之下。数据管道的数据存储输出算子配置详见数据存储输出。 父主题： 存储

查看更多 →

用户指南> 数据源配置”添加数据源。 2、未创建数据管道，或者数据管道未运行，请参照“IoT数据分析> 用户指南> 数据管道> 创建数据管道”配置管道。 3、IoTDA 实时数据源中未配置对应的产品，请勾选对应的产品，并点击确定保存。 4、数据管道中未配置对应的产品过滤算子，请添加“产品过滤”算子以及“数据存储输出”算子。

查看更多 →

实时分析输出 算子简介 将经过数据管道清洗后的数据输出到实时分析，作为实时分析的数据来源。 算子配置 算子配置项如图所示： 算子名称：用户指定这个算子的名称。 管道输出数据名称：用户声明这个输出的名称，以便在实时分析作业的“管道数据输入”算子中使用。 属性：用户选择需要将哪些属性输出给实时分析进行后续的分析任务。

查看更多 →

数据源配置中，显示当前管道数据的详细信息，无需配置。 表2 数据源参数说明 参数名称 参数说明 投递类型 数据投递类型，默认显示为PIPE。 区域 当前管道所在区域。 工作空间 当前管道所属的工作空间。 数据空间 当前管道所属的数据空间。 管道 管道的名称 数据位置策略 当前管道中数据位置的策略。

查看更多 →

使用DIS数据源 点击导航栏上的“数据管理”标签，进入数据管道页面，在“管理列表”部分有一按钮“创建数据管道”，如图所示： 点击“创建数据管道”按钮，弹出“创建数据管道”对话框，用户可自行填写“作业名称”（注意：同一用户所创建的作业名称不可重复）、“描述”，并选择数据源（若列表为

查看更多 →

据自己的情况选择不同类型的数据源配置。具体内容可参考 数据源配置 2. 配置数据管道：通过配置数据管道，用户可指定数据存储的位置，如果需要，也可以在管道中实现对数据的实时清洗。具体内容可参考数据管道 3. 配置存储：通过配置存储，用户可指定存储管理的策略，比如设置温存储各自的老化周期。

查看更多 →

图4 查看日志接入情况 在安全云脑控制台的安全分析日志管道中查看数据。 在左侧数据空间导航栏中，单击数据空间名称，展开数据管道列后，再单击创建日志存储管道创建的管道名称，右侧将显示管道数据的检索页面。 图5 管道数据页面 日志管道有数据，说明日志接入成功。 父主题： 实施步骤

查看更多 →

安全云脑支持将数据实时投递至其他管道或其他 华为云产品 中，便于您存储数据或联合其它系统消费数据。配置数据投递后，安全云脑将定时将采集到的数据投递至其他管道或对应的云产品。 根据投递目的地选择操作场景： 投递日志数据至其他数据管道：投递日志数据到其他数据管道。 投递日志数据至OBS桶：投递日志数据到 对象存储服务 （Object

查看更多 →

是用来构建并传输数据到服务端的逻辑概念，负责把数据放入消息队列。 订阅器 用于订阅安全云脑管道消息，一个管道可由多个订阅器进行订阅，安全云脑通过订阅器进行消息分发。 消费者 是用来接收并处理数据的运行实体，负责通过订阅器把安全云脑管道中的消息进行消费并处理。 消息队列 是数据存储和传输的实际容器。 威胁检测模型

查看更多 →

安全分析”，进入安全分析页面。 图2 进入安全分析页面 在左侧数据空间导航栏中，单击数据空间名称，展开数据管道列后，再单击管道名称，右侧将显示管道数据的检索页面。 图3 管道数据页面 （可选）在管道数据检索页面，输入查询条件，选择时间下拉菜单中选择查询时间，并单击“查询/分析”。 下载日志。

查看更多 →

其他数据源的使用 其他类型数据源的数据管道的创建操作与IoTDA实时数据源、DIS数据源操作类似，因此不再详述。 父主题： 创建数据管道

查看更多 →

员等。 城市工业应用 帮助客户对城市路网或管道（如水气电油管道等）进行压力调节、负载平衡，提升交通网络、管道等的通过性，进行精细化控制。 该场景能帮助您实现以下功能。 管道压力调节 根据管道实时监控数据，对管道全网进行流量压力分析，为管道阀门控制进行辅助决策，实现精细化调控。 城市路网调控

查看更多 →

安全分析”，进入安全分析页面。 图2 进入安全分析页面 在左侧数据空间导航栏中，单击数据空间名称，展开数据管道列后，再单击管道名称，右侧将显示管道数据的检索页面。 图3 管道数据页面 在数据管道检索页面，单击右上角“索引配置”，页面右侧展示索引配置页面。 在索引配置页面中，配置索引参数。 开启索引状态。

查看更多 →

访问“IoT数据分析”服务产品页，点击“立即使用”进入"IoT数据分析"服务控制台。 在左侧导航栏选择“数据管理”，进入数据管道页面，在“管理列表”点击“创建数据管道”。 弹出“创建数据管道”对话框，您可自行填写“作业名称”（注意：同一用户所创建的作业名称不可重复）、“描述”，并选择数据源（若列表

查看更多 →

工作中状态的集群，重启过程会主动停止logstash进程，管道列表“是否保持常驻”值为否，会将所有运行中管道状态置为已停止。“是否保持常驻”值为是，会触发logstash进程恢复机制，将工作中的管道状态置为恢复中，若十分钟内重新拉起logstash进程，管道状态恢复为工作中，否则置为失败状态。 调用方法

查看更多 →

开启后，将显示消费配置信息，具体说明如表1所示。 图4 开启数据消费 表1 数据消费参数说明 参数名称 参数说明 当前状态 当前管道中数据消费配置状态。 管道名称 当前数据管道的名称。 订阅器 系统预置的订阅模式，决定数据如何传递给消费者。 访问节点 当前数据的访问节点。 相关操作 数据消费

查看更多 →

安全分析”，进入安全分析页面。 图1 进入安全分析页面 在左侧数据空间导航栏中，单击数据空间名称，展开数据管道列后，再单击管道名称，右侧将显示管道数据的检索页面。 图2 管道数据页面 在管道数据检索页面，选择查询分析时间，设置查询条件或直接输入查询语句进行溯源分析。 设置查询条件或直接输入查询语句操作参考查询语法。

查看更多 →

安全分析”，进入安全分析页面。 图2 进入安全分析页面 在左侧数据空间导航栏中，单击数据空间名称，展开数据管道列后，再单击管道名称，右侧将显示管道数据的检索页面。 图3 管道数据页面 输入查询分析语句，设置时间范围，并单击“查询/分析”。 在下方选择“图表统计”页签，并在图表统计页面右侧的“图表类型”中选择。

查看更多 →

作业停止失败 错误码描述 作业停止失败。 可能原因 数据管道作业停止时，需要将其从运行环境中删除，以确保释放运行资源，可能由于网络瞬时异常等原因，导致释放运行资源失败。 处理建议 请稍后重试，或联系技术支持工程师协助解决。 父主题： 数据管道相关错误码

查看更多 →

in 当前管道监控周期内经过input插件的数据数。 该指标用于统计当前管道监控周期内经过input插件的数据数。 ≥ 0 logstash_pipeline_events_filtered 当前管道监控周期内经过filtered插件的数据数。 该指标用于统计当前管道监控周期内过滤处理的数据数。

查看更多 →

获取数据源失败 错误码描述 获取数据源失败。 可能原因 数据管道作业在启动等操作时，会获取并检查数据源的连接信息，可能由于网络瞬时异常等原因，导致获取并检查数据源时失败。 处理建议 请稍后重试，或联系技术支持工程师协助解决。 父主题： 数据管道相关错误码

查看更多 →