数据写入 写入更新数据时报错 Parquet/Avro schema 写入更新数据时报错UnsupportedOperationException 写入更新数据时报错SchemaCompatabilityException Hudi在upsert时占用了临时文件夹中大量空间 Hudi写入小精度Decimal数据失败

查看更多 →

写入数据 写入数据接口和HBase原生API一致。 可以参考以下样例代码。 样例代码 public void testPut() { LOG .info("Entering testPut."); try(Table table = conn.getTable(tableName))

查看更多 →

据一致，如有条件，建议停止对源端的写入后再做校验。 业务使用Redis时往往存在给key设置过期时间，迁移时key过期行为会影响数据一致性，如果检验结果不一致，可能是由于key过期时间不一致导致。 云厂商DTS在迁移过程中会往目标端Redis写入临时探活key，校验时可能发现非业务数据，属于正常现象。

查看更多 →

写入操作配置 本章节介绍Hudi重要配置的详细信息，更多配置请参考hudi官网：http://hudi.apache.org/cn/docs/configurations.html。 表1 写入操作重要配置项 参数 描述 默认值 hoodie.datasource.write.table

查看更多 →

Redis Redis连接器用于连接Redis数据库，可以帮助应用程序快速、高效地与Redis数据库进行交互。 Redis是一种高性能的键值存储系统，常用于缓存、会话管理、实时消息传递、排行榜等场景。它支持多种数据结构，包括字符串、哈希表、列表、集合和有序集合等。Redis还提供

查看更多 →

Redis Redis连接器用于连接Redis数据库，可以帮助应用程序快速、高效地与Redis数据库进行交互。 Redis是一种高性能的键值存储系统，常用于缓存、会话管理、实时消息传递、排行榜等场景。它支持多种数据结构，包括字符串、哈希表、列表、集合和有序集合等。Redis还提供

查看更多 →

Redis Redis源表 Redis结果表 Redis维表 父主题： Connector列表

查看更多 →

Redis 概述 环境准备 使用场景 使用指南 配置项说明 父主题： MAS-GO-SDK使用手册

查看更多 →

写入/更新命令 用户做了大量写入/更新操作后，实际数据量可能没有多大变化，但磁盘空间使用量增加了。是因为无论是写入、更新还是删除，以及索引插入和删除等操作，在后台实际上都会转成写入。因为底层的存储引擎（WiredTiger和RocksDB）采用都是appendOnly机制。只有当

查看更多 →

写入OpenTSDB数据 功能简介 使用OpenTSDB的接口(/api/put)写入数据。 函数genWeatherData()模拟生成的气象数据，函数putData()发送气象数据到OpenTSDB服务端。 样例代码 以下代码片段在com.huawei.bigdata.opentsdb

查看更多 →

批量写入Hudi表 引入Hudi包生成测试数据，参考使用Spark Shell创建Hudi表章节的2到4。 写入Hudi表，写入命令中加入参数：option("hoodie.datasource.write.operation", "bulk_insert")，指定写入方式为b

查看更多 →

Upsert数据写入 本章节主要介绍ClickHouse数据写入时数据去重写入功能的SQL基本语法和使用说明。 本章节仅适用于 MRS 3.3.0及之后版本。 基本语法 方法一：使用INSERT VALUES方式进行数据写入。 UPSERT INTO [database_name.]table

查看更多 →

流式写入Hudi表 本章节仅适用于MRS 3.3.1-LTS及之前版本。 HoodieDeltaStreamer流式写入 Hudi自带HoodieDeltaStreamer工具支持流式写入，也可以使用SparkStreaming以微批的方式写入。HoodieDeltaStreamer提供以下功能：

查看更多 →

将Redis 同步到GeminiDB Redis 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 本地自建官方开源单机或主备Redis数据库（2.8.x、3.0.x、3.2.x、4.0.x、5.0.x版本） E CS 自建官方开源单机或主备Redis数据库（2.8.x、3

查看更多 →

将GeminiDB Redis同步到Redis 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 GeminiDB Redis 本地自建Codis集群（开源Codis 3.0及以上版本） ECS自建Codis集群（开源Codis 3.0及以上版本） 本地自建Redis单机版（2

查看更多 →

使用Redis-cli离线迁移自建Redis（RDB文件） Redis-cli是Redis自带的一个命令行工具，安装Redis后即可直接使用Redis-cli工具。Redis-cli提供了RDB文件导出功能，如果Redis服务不支持获取AOF文件，可以尝试通过Redis-cli获

查看更多 →

/redis-server ../redis.conf & 访问redis 用自带的redis-cli客户端工具就可以访问Redis 服务器 了。 Redis的默认服务端口是6379 # redis-cli 127.0.0.1:6379> Redis配置文件说明 Redis的配置文件Redis.conf在

查看更多 →

/redis-server ../redis.conf & 访问redis 用自带的redis-cli客户端工具就可以访问Redis服务器了。 Redis的默认服务端口是6379 # redis-cli 127.0.0.1:6379> Redis配置文件说明 Redis的配置文件Redis.conf在

查看更多 →

使用redis_exporter出错怎么办？ 通过在命令行启动redis_exporter，根据界面输出，查看是否存在错误，根据错误描述，进行问题排查。 [root@ecs-swk /]./redis_exporter -redis.addr 192.168.0.23:6379 INFO[0000]

查看更多 →

Redis连接 介绍 通过Redis连接，可以对Redis服务器抽取或加载数据。 连接样例 { "links": [ { "link-config-values": { "configs": [

查看更多 →

批量写入Hudi表 引入Hudi包生成测试数据，参考使用Spark Shell创建Hudi表章节的2到4。 写入Hudi表，写入命令中加入参数：option("hoodie.datasource.write.operation", "bulk_insert")，指定写入方式为bulk_insert，如下所示：

查看更多 →