转储 GaussDB (DWS)数据库审计日志 GaussDB(DWS)记录数据库中的连接和用户活动相关信息。这些审计日志信息有助于用户监控数据库以确保安全、进行故障排除及定位历史操作记录。GaussDB(DWS)的审计日志默认存储于数据库中，用户可以将审计日志转储到OBS中，便于负责监控数据库中活动的

查看更多 →

批量写入Hudi表 引入Hudi包生成测试数据，参考使用Spark Shell创建Hudi表章节的2到4。 写入Hudi表，写入命令中加入参数：option("hoodie.datasource.write.operation", "bulk_insert")，指定写入方式为bulk_insert，如下所示：

查看更多 →

流式写入Hudi表 HoodieDeltaStreamer流式写入 Hudi自带HoodieDeltaStreamer工具支持流式写入，也可以使用SparkStreaming以微批的方式写入。HoodieDeltaStreamer提供以下功能： 支持Kafka，DFS多种数据源接入

查看更多 →

payload.class 这需要与插入/插入更新过程中使用的类相同。就像写入一样，压缩也使用记录有效负载类将日志中的记录彼此合并，再次与基本文件合并，并生成压缩后要写入的最终记录。 org.apache.hudi.common.model.Defaulthoodierecordpayload

查看更多 →

Elasticsearch显示CPU使用率高，导致日志无法写入 问题现象 Elasticsearch在某一时间段CPU比较高，logstash在该时刻报错Elasticsearch Unreachable，导致日志无法写入到Elasticsearch里。 原因分析 客户index

查看更多 →

。 单击“保存并运行”，进入作业管理界面，查看作业执行进度和结果。 作业执行成功之后，单击作业后面的“历史记录”查看作业的写入行数、读取行数、写入字节、写入文件数和执行日志。 父主题： 使用 CDM 上传数据到OBS

查看更多 →

件系统元数据进行修改时，会将其修改日志保存到大多数的JournalNode节点中，例如有3个JournalNode，则日志会保存在至少2个节点中。Standby节点监控JournalNodes的变化，并同步来自Active节点的修改。根据修改日志，Standby节点将变动应用到本

查看更多 →

配置项 配置说明 推荐配置 目的连接名称 选择已配置的 MRS Hudi连接。 hudi_to_cdm 数据库名称 输入或选择写入数据的数据库名称。单击输入框后面的按钮可进入数据库选择界面。 dbadmin 表名 单击输入框后面的按钮可进入表的选择界面。 该参数支持配置为时间宏变量

查看更多 →

配置项 配置说明 推荐配置 目的连接名称 选择已配置的MRS Hudi连接。 hudi_to_cdm 数据库名称 输入或选择写入数据的数据库名称。单击输入框后面的按钮可进入数据库选择界面。 dbadmin 表名 单击输入框后面的按钮可进入表的选择界面。 该参数支持配置为时间宏变量

查看更多 →

前提条件 日志已接入云日志服务（LTS）。 日志流已配置结构化规则。 已在 DLI 中创建数据库和表，创建数据库表时数据位置选择OBS，数据格式选择JSON。详细操作请参见创建数据库和表。 已在DLI中创建队列，该队列将用来将数据导入DLI的表中。详细操作请参见创建队列。 日志转储至DLI

查看更多 →

我们需要把散落在外部、内部的日志收集起来，然后通过LTS实现统一管理日志。 采集用户推广日志 采集服务端数据 采集终端用户日志 采集Web/移动端页面用户行为日志 采集 服务器 日志 采集不同网络环境下的日志数据 统一管理日志 在云日志服务LTS控制台创建日志组，详细操作请参考管理日志组。 在云日志服务L

查看更多 →

的KAFKA协议方式上报日志。以下是部分常用数据采集场景示例： 使用Flume采集文本日志上报到LTS 使用Flume采集数据库表数据并且上报至LTS 使用Flume采集syslog协议传输的日志上报到LTS 通过Flume采集TCP/UDP协议传输的日志上报到LTS 通过Flu

查看更多 →

如何查看GaussDB数据库的死锁日志 数据库的死锁日志记录在错误日志中，若您开启了“错误日志采集”，您可以下载错误日志后通过关键字“Lock wait timeout”快速定位。 操作步骤 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。 在页面左上角单击，选择“数据库 > 云数据库

查看更多 →

查询GeminiDB Redis数据库慢日志 功能介绍 查询GeminiDB Redis数据库慢日志信息，支持日志关键字搜索。 接口约束 不支持使用 &&、||、AND、OR、NOT、*、？、:、>、<、=、>=、<= 这些关键字来搜索日志。 查询到的慢日志数据在入参start_time和end_time的时间段内。

查看更多 →

查询GeminiDB Mongo数据库慢日志 功能介绍 查询GeminiDB Mongo数据库慢日志信息，支持日志关键字搜索。 接口约束 不支持使用 &&、||、AND、OR、NOT、*、？、:、>、<、=、>=、<= 这些关键字来搜索日志。 查询到的慢日志数据在入参start_time和end_time的时间段内。

查看更多 →

如何查看TaurusDB数据库的死锁日志 数据库的死锁日志不会记录在错误日志中，您可以通过数据管理服务（Data Admin Service，简称DAS）这款可视化的专业数据库管理工具，快速执行SQL语句查看。 操作步骤 登录管理控制台。 单击管理控制台左上角的，选择区域和项目。

查看更多 →

IoTDB基本原理 IoTDB（物联网数据库）是一体化收集、存储、管理与分析物联网时序数据的软件系统。 Apache IoTDB采用轻量式架构，具有高性能和丰富的功能。 IoTDB从存储上对时间序列进行排序，索引和chunk块存储，大大的提升时序数据的查询性能。通过Raft协议，

查看更多 →

备份和恢复数据库审计日志 数据库安全审计支持将数据库的审计日志备份到OBS桶，实现高可用容灾。您可以根据需要备份或恢复数据库审计日志。 前提条件 数据库安全审计实例的状态为“运行中”。 请参考开启数据库安全审计成功开启数据库安全审计功能。 注意事项 执行备份后，审计日志将备份到对

查看更多 →

对接LTS并查看数据库审计日志 操作场景 配置访问日志后，GaussDB实例新生成的审计日志记录会上传到云日志服务（Log Tank Service，简称LTS）进行管理。您可以查看GaussDB实例审计日志的详细信息，包括搜索日志、日志可视化、下载日志和查看实时日志等功能。 开启

查看更多 →

查询GeminiDB Mongo数据库错误日志 功能介绍 查询GeminiDB Mongo数据库错误日志信息，支持日志关键字搜索。 接口约束 不支持使用 &&、||、AND、OR、NOT、*、？、:、>、<、=、>=、<= 这些关键字来搜索日志。 查询到的慢日志数据在入参start_time和end_time的时间段内。

查看更多 →

。 单击“保存并运行”，进入作业管理界面，查看作业执行进度和结果。 作业执行成功之后，单击作业后面的“历史记录”查看作业的写入行数、读取行数、写入字节、写入文件数和执行日志。 父主题： 使用CDM上传数据到OBS

查看更多 →