最新动态

1

使用LTS实现日志TopN统计与时间排序可视化

本实践将TopN统计与时间排序两种查询方式贯穿全文，介绍如何编写TopN和时间排序SQL查询语句，并配置图表、折线图等可视化图表，帮助您构建从日志采集到可视化分析的完整操作。

商用

使用LTS实现日志TopN统计与时间排序可视化

1

API参数易理解性优化

针对接口的各类参数，从“参数解释”、“约束限制”、“取值范围”和“默认取值”四个维度进行规范化描述，提升参数文档的可读性与准确性，确保您无需额外查阅即可正确调用接口。

--

API参考

1

查询和分析网站日志

通过本实践，您将学习到如何使用云日志服务（LTS）查询与分析网站日志。以网站日志为例，帮助您快速掌握LTS的使用方法。

商用

查询和分析网站日志

1

配置日志告警规则

配置日志告警规则时，支持应用于其他告警规则功能，将源告警规则复制到目标告警规则。

商用

配置日志告警规则

2

添加自定义绕接规则

云主机ECS文本日志接入LTS支持添加自定义绕接规则和重复采集。

商用

主机场景管理ICAgent

3

text_search表函数

text_search函数是云日志服务（LTS）提供的表函数，用于关键词检索日志数据。主要介绍text_search函数的语法规则，包括参数解释、函数示例等。

商用

text_search表函数

1

通过跨IAM账号接入LTS采集数据

通过跨IAM账号接入LTS采集数据，可以实现统一管理、实时监控和安全隔离，从而提高管理效率和数据安全性。该最佳实践介绍如何通过跨IAM账号接入LTS采集数据。

商用

通过跨IAM账号接入LTS采集数据

1

通过统计图表可视化分析CCE应用日志

通过SQL语句对日志进行查询与分析，并将分析结果生成多样化统计图表，实现日志数据的直观展示与趋势监控。该最佳实践以云容器引擎CCE应用日志接入LTS为例，对CCE应用日志进行可视化图表展示。

商用

通过统计图表可视化分析CCE应用日志

1

安装ICAgent（区域内主机）

新增镜像安装方式。

商用

安装ICAgent（区域内主机）

2

ICAgent限制

ICAgent限制的监控文件数最大支持1000个文件。

商用

ICAgent限制

3

日期和时间函数

日期和时间函数中新增查询范围的结束时间（__time_range__.end_time）和起始时间（__time_range__.start_time）。

商用

日期和时间函数

1

配置ICAgent结构化解析

JSON解析层数最多支持设置10层。

商用

配置ICAgent结构化解析

2

快速分析

支持通过鼠标拖拽字段调整位置。

商用

创建快速分析

3

云端结构化模板

新增OBS桶日志结构化模板。

商用

设置云端结构化模板

4

云服务接入LTS

新增虚拟专用网络VPN、云解析服务DNS、云连接CC、云应用引擎CAE等多服务接入LTS。

商用

云服务接入LTS概述

1

日志转储

支持批量删除日志转储任务。

商用

日志转储至OBS

2

快速分析

支持通过字段名称搜索快速分析字段。

商用

创建快速分析

3

版面设置

支持设置账号级别或用户级别的版面配置。

商用

搜索与分析日志

1

主题模式

支持设置主题模式。

商用

查看日志管理

2

搜索日志组

支持通过企业项目搜索日志组。

商用

管理日志组

3

搜索日志流

支持通过企业项目搜索日志流。

商用

管理日志流

4

新手入门

支持新手入门流程，方便用户快速使用LTS。

商用

查看日志管理

1

字段名称支持设置别名

配置索引时，支持为字段名称设置别名，合理设置字段别名可以显著提高日志的可读性、可维护性和查询效率。

商用

创建LTS日志索引

2

新增常用功能模块

日志管理页面显示常用使用功能模块，方便快速使用该功能。

商用

查看日志管理

3

云端结构化模板

新增云端结构化系统模板：TaurusDB审计日志、Workspace用户操作日志。

商用

设置云端结构化模板

4

日志转储

日志转储至DMS支持转储原始日志。

商用

日志转储至DMS

1

仪表盘模板

支持提取用户自定义创建的仪表盘模板，操作简单，即可快速复用已有的仪表盘模板。

商用

创建日志仪表盘

1

日志接入

日志接入采集配置绕接规则支持验证。

商用

使用ICAgent插件采集日志

2

告警规则支持标签管理

支持按照业务需求对不同的告警规则添加对应的标签。

商用

配置日志告警规则

3

ICAgent结构化解析

ICAgent结构化解析配置JSON格式的日志时支持JSON字符串解析。

商用

ICAgent结构化解析规则说明

4

告警规则

告警规则名称长度不超过128个。

商用

配置日志告警规则

1

下载日志

单次下载日志时支持最大2,000万条日志。

商用

进入搜索LTS日志页面

2

功能增强

日志接入时，K8s Label白名单/K8s Label黑名单支持选择And或or的关系。

商用

云容器引擎CCE应用日志接入LTS

3

快速分析

支持设置快速分析采样条数，默认值10万条，最小值为10万条，最大值1000万条。通过采样快速统计字段值取值分布，并非对全量数据进行分析，采样条数越多分析数据越慢。

商用

设置LTS日志索引配置

4

风格优化

优化日志告警页面的操作按钮，方便用户识别。

商用

配置日志告警规则

5

支持ICAgent结构化解析

ICAgent支持正则、分隔符、JSON、插件组合等多种解析方式。

商用

ICAgent结构化解析规则说明

6

日志文件编码

日志文件编码支持GBK《汉字内码扩展规范》，中文计算机编码的一种，是ASCII码和GB2312编码的扩展。

商用

云容器引擎CCE应用日志接入LTS

7

日志告警

支持使用告警的规则名称搜索告警规则。

商用

查看LTS告警列表

8

分钟级流量监控

在资源统计页面，查看不同日志组或日志流的资源用量明细和用量Top排序

商用

查看日志管理

9

日志重复采集

CCE、ECS、自建kubernetes日志接入LTS时，允许文件多次采集。（暂不支持Windows场景）

商用

云容器引擎CCE应用日志接入LTS

10

新建查询

查询日志关键词时，支持新建查询。

商用

进入搜索LTS日志页面

1

ICAgent采集

ICAgent Windows版本支持标识符主机组、跨云采集、日志采集错误诊断功能。

商用

安装ICAgent（区域外主机）

2

索引配置

支持用户为每个日志流单独配置全文索引和字段索引，提供个性化分词符配置能力。

商用

设置LTS日志索引配置

3

日志转储

转储OBS自定义路径支持更多可变参数。

商用

日志转储至OBS

4

日志接入

配置接入时支持配置自定义键值对、单条日志拆分大小支持自定义最大到1MB、支持日志文件路径深度自定义，最多支持20层。

商用

云容器引擎CCE应用日志接入LTS

5

日志告警

支持批量编辑/导出/导入告警规则。

商用

配置日志告警规则

6

ICAgent采集诊断

提供采集诊断仪表盘模板，支持查看ICAgent异常监控、ICAgent整体状态和ICAgent采集监控。

商用

设置ICAgent日志采集开关

1

日志接入

支持设置标准输出和标准错误输出采集到不同的文件（stdout.log和stderr.log）或同一个文件（stdout.log）。

商用

云容器引擎CCE应用日志接入LTS

2

云端结构化模板

新增GeminiDB Mongo接口审计日志系统模板。

商用

设置云端结构化模板

3

默认分词符

默认分词符新增\和?

商用

设置LTS日志内容分词

1

批量接入

支持批量创建BMS、CCE、ECS等服务日志接入LTS的规则。

商用

使用ICAgent插件采集日志

2

日志组

日志组支持选择企业项目。

商用

管理日志组

3

自定义标识

创建自定义标识主机组时，主机类型Windows主机。

商用

主机组

4

仪表盘

仪表盘支持选择企业项目。

商用

创建日志仪表盘

5

日志生成指标

支持创建日志指标规则，将上报到LTS的日志数据提取为指标来统一管理。

公测

日志生成指标

1

ServiceStage日志采集

支持ServiceStage容器应用的日志采集到LTS。

商用

ServiceStage容器应用日志接入

2

告警行动规则

支持创建告警行动规则同时关联消息模板。

商用

创建告警行动规则

3

告警简单降噪

日志告警支持设置通知频率进行简单降噪，防止告警轰炸。

商用

告警规则

1

支持自定义版面设置

在日志搜索页面，支持用户自定义版面设置。

商用

日志搜索

2

存储时间

日志存储时间支持配置10年。（该功能仅针对白名单用户内测使用。）

公测

日志组

3

CCE事件日志

支持采集CCE K8S 事件日志。

商用

CCE接入

4

支持采集已挂载的容器文件

CCE日志采集支持ICAgent采集已挂载的容器文件日志。

商用

CCE接入

1

查看上下文-新增简洁模式

在查看上下文页面，支持设置简洁模式，通过省略日志时间等冗余信息，即可快速浏览日志。

商用

日志搜索

2

采集配置支持校验

CCE接入日志时，在采集配置页面支持校验正则表达式。

商用

CCE接入

3

日志组和日志流支持修改名称

创建日志组和日志流后，支持修改日志组和日志流的名称，原始名称不能修改。

商用

日志组

1

图表优化

优化表格、折线图、饼图、柱状图、数字图配置项

商用

统计图表

2

交互式搜索

新增交互式搜索，用户可以快速添加查询语句，降低搜索门槛。

商用

日志搜索

3

实时日志展示优化

实时日志展示方式优化为实时滚动，提升展示效果。

商用

实时查看日志

4

日志流标签

日志流添加标签后，上报话单显示日志流标签信息，方便用户在费用中心通过资源标签（即日志流标签）统计分析费用。

商用

最佳实践

5

快速查询

单个日志流的快速查询配额从10增加到50。

商用

快速查询

1

索引配置

支持用户为每个日志流单独配置全文索引和字段索引，提供个性化分词符配置能力

商用

索引配置

2

日志接入

支持用户自建K8S日志接入LTS。

公测

自建K8s接入

3

告警规则

• 支持批量开启、关闭、临时关闭告警，提升编辑效率。

• 支持告警规则改名。

• 支持复制告警。

商用

告警规则

4

字符分隔支持多字符

支持配置多个字符作为分隔符。

商用

结构化方式

5

自定义分词符

支持用户为全文索引和字段索引单独自定义分词符。

公测

结构化方式

1

自定义日志时间优化

当日志接入云日志服务（LTS）时，您可以通过开启“自定义日志时间”开关，将日志中的时间字段设置为接入配置的时间。

商用

自定义日志时间

2

结构化配置模板

结构化配置中，增加结构化配置模板GaussDBforCassandra慢日志、MYSQL_AUDIT、GaussDBforMongo错误日志和GaussDBforMongo慢日志模板。

公测

结构化模板

3

仪表盘模板

提供ER仪表盘模板。

公测

仪表盘模板

1

复制搜索分析语句

仪表盘支持复制搜索分析语句

公测

创建仪表盘

1

日志清洗日落

日志清洗日落，推荐您使用函数加工功能。

公测

函数加工

2

仪表盘模板

提供CDN仪表盘模板。

公测

仪表盘模板

3

过滤器

过滤器中动态列表来源支持字段模糊匹配查询。

公测

过滤器

1

自定义标识主机组

支持创建自定义标识主机组，可自动添加自定义标识。

公测

自定义标识

2

结构化配置模板

结构化配置中，增加结构化配置模板SQLSERVER错误日志和GAUSSDB_REDIS慢日志模板。

公测

结构化配置

3

收藏日志流

收藏日志流支持两种展示方式：我的收藏和我的收藏（本地缓存）。

公测

控制台首页

1

索引配置

通过配置索引后，可对日志进行查询和分析操作。

公测

配置索引

2

函数加工

提供函数加工，可以基于函数服务提供的函数模板或者自定义函数，实现日志规整、流转、脱敏、过滤等功能。

公测

函数加工

3

批量创建告警

支持选择多个日志流，批量创建关键词告警。

商用

日志告警

1

日志搜索语法

支持*、in、()、key:#"abc def"等搜索语法。

商用

日志搜索

2

仪表盘模板

提供APIG仪表盘模板、NGINX仪表盘模板和CFW仪表盘模板。

公测

仪表盘模板

3

日志接入

控制台界面支持ELB、APIG和CTS等日志接入向导。

商用

云服务接入

1

仪表盘模板

提供DCS仪表盘模板、DDS仪表盘模板和ELB仪表盘模板。

公测

仪表盘模板

2

日志资源使用量预警

日志使用量超过当前配置的自定义日志资源使用量额度时，系统会发送告警通知。

商用

配置日志资源使用量预警

3

结构化配置模板

结构化配置中，增加结构化配置模板Tomcat模板、DDS、DCS和OPENGUASS等。

商用

结构化配置

1

搜索提示

日志搜索时，使用Tab键自动补全下拉提示框中显示的第一个关键词。

商用

日志搜索

2

CCE接入

支持云容器引擎（Cloud Container Engine）日志接入。

商用

CCE接入

3

自定义日志时间

日志时间默认为日志接入配置中的时间，云日志服务支持通过开启“自定义日志时间”开关配置自定义日志时间。

商用

自定义日志时间

1

查看上下文优化显示

查看上下文时，支持查询行数、高亮显示和过滤日志等操作。

商用

快速查询

1

跨账号接入

通过跨账号接入-日志流映射方式时，将委托账号的日志接入到云日志服务里。

商用

跨账号接入

1

新版日志搜索

提供了全新的日志搜索界面，添加了分享日志、简化字段详情、版面设置等功能。

商用

日志搜索

1

资源统计

提供日志索引流量、读写流量、存储量用量统计界面。

商用

资源统计

1

支持转储标签

日志转储时支持转储标签。

商用

转储至OBS

1

转储支持tag投递

日志转储时支持投递tag字段。

商用

转储至OBS

1

转储支持配置时区

日志转储时支持时区配置。

商用

转储至OBS

1

跨租户转储

支持当转储其他帐号时，填写委托人的帐号名称。

商用

转储至OBS

2

OBS桶加密转储

支持对加密的OBS进行日志转储。

商用

转储至OBS

1

主机管理

建立主机组与采集配置的关联，通过修改主机组或采集路径，即可修改日志流采集的范围。

商用

主机组

2

日志接入向导

提供Step By Step主机日志接入向导。

商用

日志接入

1

云服务接入

LTS支持采集不同云服务日志。

商用

云服务接入

2

分词配置

通过配置分词可将日志内容按照分词符切分为多个单词，在日志搜索时可使用切分后的单词进行搜索。

商用

分词配置

3

API接入

开放上报日志API，可以使用API直接接入日志。

商用

API接入

1

自定义结构化模板

支持保存自定义结构化规则为模板，供同类型日志结构化配置时快速使用。

商用

结构化配置

1

Nginx结构化配置

支持解析标准Nginx格式日志。

商用

结构化配置

1

JSON、分隔符及系统模板结构化配置

支持解析标准JSON格式日志；支持根据分隔符拆分日志（如逗号、空格等）；支持使用ELB/VPC/CTS系统模板自动提取日志。

商用

结构化配置

1

日志搜索

支持按标签过滤日志内容。

商用

日志搜索

1

接口开放

支持开放日志组和日志流管理API接口。

商用

创建日志组

1

日志结构化、SQL查询

支持对原始日志进行结构化，并使用SQL语句对结构化后的日志进行查询与分析。

商用

结构化配置

1

转储至DIS

DIS提供日志存储能力外，还提供丰富的大数据分析能力，可以将大量日志文件传输到云端做备份，进行离线分析、存储查询及机器学习，还能用于数据丢失或异常后的恢复和故障分析。同时大量小文本文件可合并转储为大文件，提高数据处理性能。

商用

转储至DIS