更新时间:2025-09-09 GMT+08:00
数据集成(实时作业)
- 问题案例总览
- 数据源和migration资源组网络不通如何排查?
- 数据源安全组放通哪些端口可满足Migration访问?
- 如何配置Hudi Compaction的Spark周期任务?
- DLI到Hudi实时同步中,作业开启同步新增字段后,DLI SQL show create table无法查询到新增字段怎么办?
- 写Hudi同步过程中报错,错误信息包含“java.lang.NumberFormatException: For input string”怎么办?
- 写Hudi同步过程中报错,错误信息包含“HoodieException: Duplicate fileID”怎么办?
- Hudi到Doris实时同步中,源端DECIMAL类型作为主键自动建Doris表报错,错误信息包含“String Type should not be used in key column[xxx]”怎么办?
- 在写DWS同步过程中,目的端包含date字段类型时报错,错误信息包含“Text 'xxx' could not be parsed, unparsed text found at index 10”怎么办?
- MySQL到DWS实时同步中,同步新增列的DDL时报错怎么办?
- MySQL到DWS实时同步中,DWS为什么需要对主键null值进行过滤?
- MySQL到Doris实时同步中,源端tinyint(1)类型写入报错,报错信息包含“column(xx) value is incorrect while strict mode is true, src value is xxx”怎么办?
- MySQL增量同步过程中报错,错误信息包含“The connector is trying to read binlog starting at Struct xxx but this is no longer available on the server”怎么办?
- Kafka到DLI实时同步中,作业运行失败,报“Array element access needs an index starting at 1 but was 0”怎么办?
- PostgreSQL数据源如何手动删除复制槽?
- 如何增加PostgreSQL、GaussDB数据源额外权限?
- PostgreSQL/GaussDB作为源端时,实时作业启动失败且报错信息包含“all replication slots are in use”怎么办?
- PostgreSQL/GaussDB作为源端时,作业启动失败且报错信息包含“permission denied for function pg_ls_waldir”怎么办?
- PostgreSQL/GaussDB作为源端时,作业启动失败且报错信息包含“replication slot "xxx" is already active”怎么办?
- GaussDB到DWS实时同步中,开启逻辑删除时写入DWS报错,错误信息包含“null value in column "xxx" violates not-null constraint”怎么办?
- GaussDB作为源端时,增量同步过程中报错且信息包含“number of requested standby connections exceeds max_wal_senders”怎么办?
- GaussDB作为源端时,增量同步过程中报错且信息包含“no gs_hba.conf entry for replication connection from host "xxxx", user "xxx", SSL off”怎么办?
- Oracle 在读取全量或增量数据时遇到日志解析失败,错误信息包含“DmlParserException: DML statement couldn't be parsed”,应如何处理?
- Oracle数据源如何开通归档日志、查询权限和日志解析权限?
- 在Oracle启动增量过程中,报无法读取V$DATABASE视图,错误信息为“cannot read the redo log position via'SELECT CURRENT_SCN FROM V$DATABASE”怎么办?
- Oracle增量读取启动时提示补充日志未开启, 报错信息包含“Suppleemnt logging not properly configured”怎么办?
- Oracle作为源端时在全量同步的过程中,报数据库历史记录内容完全或者部分缺失, 报错信息包含“The db history topic or its content is fully or partially missing. Please check database history topic configuration and re-execute the snapshot.”怎么办?
- 在Oracle增量读取过程中,数据库日志失效,报错信息包含“ORA-01292: no log file has been specified for the current LogMiner session”怎么办?
- Oracle作为源端时,增量启动过程中报不支持CONTINOUS_MINE,关键字“oracle.jdbc.OracleDatabaseException: ORA-44609: CONTINOUS_MINE is desupported for use with DBMS_LOGMNR.START_LOGMNR”怎么办?
- Oracle作为源端时,增量读取过程中报socket超时,信息包含“java.sql.SQLRecoverableExeception: IO Error: Socket read timed out”怎么办?
- 如何查看实时作业已消费位点并恢复作业?
- MySQL源端作业如何查看已消费位点?
- Oracle源端作业如何查看已消费位点?
- SQLServer源端作业如何查看已消费位点?
- PostgreSQL/Gaussdb源端作业如何查看已消费位点?
- 如何连接已开启SASL认证的DMS Kafka?