Logstash接口 创建配置文件 更新配置文件 启动pipeline迁移数据 停止pipeline迁移数据 添加到自定义模板 连通性测试 查询模板列表 查询配置文件列表 查询pipeline列表 查询操作记录 查询配置文件内容 删除配置文件 删除自定义模板 热启动pipeline迁移数据

查看更多 →

SHOW CATA LOG S 语法 SHOW CATALOGS [ LIKE pattern [ESCAPE escapeChar] ] 描述 这个表达式用于列出可用的catalogs。可选参数like被用于基于关键字来进行匹配。 示例 列出所有catalogs： SHOW CATALOGS;

查看更多 →

删除Logstash集群 当用户已完成Logstash数据迁移业务，无需继续使用某一集群时，可删除集群释放资源。 约束限制 删除集群时，会清理集群业务数据，请谨慎操作。 删除按需计费的集群 登录 云搜索服务 管理控制台。 在左侧导航栏，选择对应的集群类型，进入集群列表界面。 在对应集群的“操作”列中单击“更多>删除”。

查看更多 →

Logstash对接OBS 概述 Logstash能够从多个来源采集数据、转换数据并将数据发送到存储系统中，具体请参见Logstash。本文用于描述Logstash如何对接使用OBS。 注意事项 请使用较新版本的logstash，例如≥7.10.2的版本，避免使用较老版本的logstash。

查看更多 →

缩容Logstash集群 当集群有充足的能力处理当前数据时，为节省资源可以缩容Logstash集群。 缩容Logstash集群是通过随机下线节点减少集群的“节点数量”，减少集群占用的资源。 前提条件 集群处于“可用”状态，且无正在进行的任务。 约束限制 缩容是通过下线节点减少节点

查看更多 →

基于集群规划，创建合适的Logstash集群。 创建Logstash集群 配置路由 当Logstash集群与数据源子网位于同一主网卡时，网络自动互通；如果不通，则需在Logstash集群的每个节点上配置指向源数据 服务器 IP的回程路由。 配置Logstash集群路由 配置Logstash迁移任务

查看更多 →

管理Logstash集群 查看Logstash集群信息 设置Logstash集群标签 为Logstash集群绑定企业项目 管理Logstash集群的CA证书 强制重启Logstash集群 删除Logstash集群 父主题： 使用Logstash迁移数据

查看更多 →

扩容Logstash集群 当Logstash集群的数据面业务变化，需要动态调整集群节点的数量和规格时，可以执行扩容Logstash集群。 场景描述 表1 Logstash集群的扩容场景 场景 描述 相关文档 增加节点数量 只支持扩容集群的“节点数量”。适用于如下场景： 当需要确保

查看更多 →

创建Logstash集群 前提条件 已经参考Logstash集群规划建议完成待创建的Logstash集群规划。 创建集群 登录 云搜索 服务管理控制台。 在“总览”页面单击右上角的“创建集群”，进入“创建集群”页面。 或者左侧导航栏单击“集群管理>Logstash”，单击右上角的“创建集群”，进入“创建集群”页面。

查看更多 →

配置Logstash集群路由 当Logstash集群和数据源的子网在同一个主网卡时，两者的网络互通，无需配置Logstash集群路由。 当Logstash集群和数据源的子网不在同一个主网卡时，需要配置Logstash集群路由，给Logstash集群的每个节点新增一个指向目标IP地

查看更多 →

启动Logstash迁移任务 场景描述 使用Logstash集群启动Logstash迁移任务的操作流程： 测试数据源和目的端与Logstash集群之间的网络连通性，确保数据传输畅通：测试连通性 通过启动配置文件启动Logstash迁移任务。 当管道列表没有“工作中”的任务时，则启动配置文件。

查看更多 →

强制重启Logstash集群 当Logstash集群由于长时间运行或者其他未知原因导致Logstash故障不可用时，可以通过强制重启VMs集群恢复集群运行。 约束限制 重启过程中集群不可用，请谨慎操作。 工作中状态的集群，重启过程会主动停止Logstash进程。 当管道列表“是否

查看更多 →

。标签如果不符合标签策略的规则，则可能会导致集群创建失败，请联系组织管理员了解标签策略详情。 标签管理 CSS 服务支持对集群标签进行增删改查。 登录云搜索服务管理控制台。 在集群管理页面，单击待管理标签的集群名称。 系统跳转至该集群“基本信息”页面。 左侧菜单栏选择“标签”，在此

查看更多 →

查看Logstash集群信息 在Logstash集群的列表页和基本信息页，可以获取集群的状态、版本、节点等信息。 集群列表介绍 集群列表会展示当前账号下同一集群类型的所有集群。当集群数量较多时，会翻页显示，支持查看任何状态下的集群。 集群列表默认按时间顺序排列，时间最近的集群显示在最前端。

查看更多 →

配置Logstash迁移任务 创建Logstash配置文件 启动Logstash迁移任务 停止Logstash迁移任务 Logstash配置文件模板介绍 父主题： 使用Logstash迁移数据

查看更多 →

Logstash集群规划建议 规划集群可用区 为防止数据丢失，并确保在服务中断情况下能降低集群的停机时间，从而增强集群的高可用性， CS S服务支持跨可用区（即多可用区）部署。用户可以在同一个区域内选择两个不同的可用区进行集群部署。 在创建集群时，如果用户选择了两个可用区，CSS服务

查看更多 →

扩缩容Logstash集群 扩容Logstash集群 缩容Logstash集群 父主题： 使用Logstash迁移数据

查看更多 →

停止Logstash迁移任务 场景描述 在Logstash集群停止Logstash迁移任务有两种方式。 全部停止：在管道列表中，同时停止所有任务。停止成功后，管道“运行状态”变成“已停止”。 热停止：在管道列表中，一次只能停止一个管道任务。停止成功后，该管道任务会直接从管道列表中移除。

查看更多 →

验证DIS Logstash Plugin 验证DIS Logstash Input 使用PuTTY工具远程登录Logstash所在服务器。 启动Logstash程序。 bin/logstash -f dis_to_local.conf 其中 -f 为用户编写的配置文件路径。 检查DIS

查看更多 →

创建Logstash配置文件 Logstash集群通过配置文件定义迁移方案，从不同的数据源（input）迁移数据到不同的目的端（output）。 约束限制 创建的配置文件大小不能超过100k。 Logstash集群允许最多配置50个配置文件，最多可以同时存在5个“状态”为“校验中”的配置文件。

查看更多 →

配置DIS Logstash Plugin DIS Logstash Plugins 分为Input与Output插件，本节介绍插件的各个配置项具体含义。 配置DIS Logstash Input 配置模板如下：（该模板为从DIS通道下载数据写入本地文件） input { dis

查看更多 →