properties 在文件中添加OBS日志级别配置： log4j.logger.org.apache.hadoop.fs.obs=WARN log4j.logger.com.obs=WARN 图4 添加OBS日志级别 使用Spark Shell读取OBS文件 使用安装客户端用户登录客户端安装节点。

查看更多 →

MySql CDC 功能描述 MySQL的CDC源表，即MySQL的流式源表，会先读取数据库的历史全量数据，并平滑切换到Binlog读取上，保证数据的完整读取。 表1 支持类别 类别 详情 支持表类型 源表 前提条件 MySQL CDC要求MySQL版本为5.6，5.7或8.0.x。

查看更多 →

OCR服务识别结果可以转化为Word、TXT、pdf吗 OCR提取之后返回的结果是JSON格式，需要用户通过编程，将结果保存为Word、TXT、pdf格式。 父主题： API使用类

查看更多 →

大量数据文件，训练过程中读取数据效率低？ 当数据集存在较多数据文件（即海量小文件），数据存储在OBS中，训练过程需反复从OBS中读取文件，导致训练过程一直在等待文件读取，效率低。 解决方法 建议将海量小文件，在本地压缩打包。例如打包成.zip格式。 将此压缩后的文件上传至OBS。

查看更多 →

MySQL MySQL连接器用于连接MySQL数据库，负责建立和维护应用程序和MySQL数据库之间的连接，并管理数据的传输。 MySQL是一个流行的开源关系型数据库，广泛用于Web应用程序的后端。它支持多种操作系统，包括Windows、Linux、Unix和macOS X。MyS

查看更多 →

MySQL MySQL连接器用于连接MySQL数据库，负责建立和维护应用程序和MySQL数据库之间的连接，并管理数据的传输。 MySQL是一个流行的开源关系型数据库，广泛用于Web应用程序的后端。它支持多种操作系统，包括Windows、Linux、Unix和macOS X。MyS

查看更多 →

MySQL CDC源表 功能描述 MySQL的CDC源表，即MySQL的流式源表，会先读取数据库的历史全量数据，并平滑切换到Binlog读取上，保证数据的完整读取。 前提条件 MySQL CDC要求MySQL版本为5.7或8.0.x。 该场景作业需要 DLI 与MySQL建立增强型跨

查看更多 →

过OBS服务。 文件格式为PDF、PPT、Word、Excel。 约束条件 本章节的方法仅针对提取PDF、PPT、Word、Excel格式文件的单个文件的暗水印。 PDF文件和Word文件最大50M。 Excel文件最大70M。 PPT文件最大20M。 本地文件水印提取 登录管理控制台。

查看更多 →

MySQL CDC源表 功能描述 MySQL的CDC源表，即MySQL的流式源表，会先读取数据库的历史全量数据，并平滑切换到Binlog读取上，保证数据的完整读取。 前提条件 MySQL CDC要求MySQL版本为5.7或8.0.x。 该场景作业需要DLI与MySQL建立增强型跨

查看更多 →

GaussDB (for MySQL)服务如何开启并查看Binlog文件？ 本章节介绍开启Binlog、查看Binlog的方法，以及开启Binlog后对GaussDB(for MySQL)的性能影响。 开启Binlog 查看Binlog文件 开启Binlog对GaussDB(for MySQL)的性能影响

查看更多 →

Hive HDFS读取方式时，支持按Hive文件分片。 JDBC读取方式时，不支持分片。 Apache HDFS 支持按文件分片。 Apache HBase 支持按HBase的Region分片。 Apache Hive HDFS读取方式时，支持按Hive文件分片。 JDBC读取方式时，不支持分片。

查看更多 →

用户名密码。 数据库查询操作 MySQL查询操作。 输入参数 用户配置发布消息执行动作，相关参数说明如表2所示。 表2 MySQL查询操作输入参数说明 参数 必填 说明 数据库表名 是 要查询的MySQL的表名称。 columnList 否 要查询的MySQL的列名称。 condition

查看更多 →

Mysql 概述 环境准备 使用场景 使用指南 配置项说明 父主题： MAS-GO-SDK使用手册

查看更多 →

MySQL到GaussDB(for MySQL) 支持的源和目标数据库 表1 支持的数据库 源数据库 目标数据库 E CS 自建MySQL 5.6、5.7、8.0版本 本地自建MySQL 5.6、5.7、8.0版本 其他云上MySQL 5.6、5.7、8.0版本 GaussDB(for

查看更多 →

景。 源数据库引擎 选择“MySQL”。 流量文件来源 选择源数据库流量文件来源。 华为云API下载：通过华为云服务对应的API获取审计日志文件 华为云OBS下载：通过华为云OBS桶获取流量文件。 目标数据库引擎 选择“GaussDB(for MySQL)”。 网络类型 此处以“公网网络”为示例。

查看更多 →

位于content数组的每个对象中，用于配置数据源读取器。 name：读取器的名称，如mysqlreader表示MySQL数据源读取器。 parameter：读取器的参数配置，包含数据源连接信息、要读取的字段等。 username：数据源的用户名。 password：数据源的密码。 column：要读取的字段列表。

查看更多 →

读取输出口显示内容 接口名称 WEB_GetVideoOutSourceAPI 功能描述 读取输出口显示内容时调用该接口。 应用场景 读取输出口显示内容。 URL https://ip/action.cgi?ActionID=WEB_GetVideoOutSourceAPI 参数

查看更多 →

训练过程读取数据 在ModelArts上训练模型，输入输出数据如何配置？ 如何提升训练效率，同时减少与OBS的交互？ 大量数据文件，训练过程中读取数据效率低？ 使用Moxing时如何定义路径变量？ 父主题： Standard训练作业

查看更多 →

配置Hive读取Hudi表 Hudi表对应的Hive外部表介绍 Hudi源表对应一份HDFS的数据，通过Spark组件、Flink组件或者Hudi客户端，可以将Hudi表的数据映射为Hive外部表，基于该外部表，Hive可以进行实时视图查询、读优化视图查询以及增量视图查询。 根据

查看更多 →

使用Scan读取HBase数据 功能简介 要从表中读取数据，首先需要实例化该表对应的Table实例，然后创建一个Scan对象，并针对查询条件设置Scan对象的参数值，为了提高查询效率，最好指定StartRow和StopRow。查询结果的多行数据保存在ResultScanner对象

查看更多 →

MySQL 账号管理 数据库管理 SQL操作 表管理 视图管理 存储过程管理 事件管理 触发器管理 函数管理 数据导入和导出 自动生成测试数据（不再推广） 数据追踪与回滚（不再推广） 任务管理 表结构对比与同步（不再推广） DBA智能运维（新版） DBA智能运维（旧版）

查看更多 →