数据读取 单表查询 多表连接查询 WITH表达式

查看更多 →

读取模型 概述 读取spark pipeline model类型的模型文件。 输入 无 输出 spark pipeline model类型的模型对象 参数说明 参数 参数说明 input_model_path 模型文件所在的路径 样例 params = { "input_model_path":

查看更多 →

使用Sqoop Sqoop如何连接MySQL Sqoop读取MySQL数据到HBase时报HBaseAdmin.<init>方法找不到异常 通过Hue创建Sqoop任务将数据从HBase导入HDFS时报错 通过Sqoop从Hive导出数据到MySQL 8.0时报数据格式错误 通过sqoop

查看更多 →

MySQL CDC源表 功能描述 MySQL的CDC源表，即MySQL的流式源表，会先读取数据库的历史全量数据，并平滑切换到Binlog读取上，保证数据的完整读取。 前提条件 MySQL CDC要求MySQL版本为5.7或8.0.x。 该场景作业需要 DLI 与MySQL建立增强型跨

查看更多 →

如何读取“__consumer_offsets”内部topic的内容 用户问题 Kafka如何将consumer消费的offset保存在内部topic“ __consumer_offsets”中？ 处理步骤 以客户端安装用户，登录安装Kafka客户端的节点。 切换到Kafka客户

查看更多 →

读取数据 概述 读取格式化的数据，支持csv、json、parquet等。 输入 无 输出 数据集 参数说明 参数 参数说明 input_file_path 数据文件的绝对路径、相对路径、目录路径或者文件路径均可 format 文件格式，支持csv等 has_header 是否包含表头

查看更多 →

对象存储 对象存储服务 （OBS） 支持按文件分片。 文件系统 FTP 支持按文件分片。 SFTP 支持按文件分片。 HTTP 支持按文件分片。 关系型数据库 云数据库 MySQL 支持按表字段分片。 仅当配置“按表分区抽取”时，按表分区分片。 云数据库 PostgreSQL 支持按表字段分片。

查看更多 →

创建云数据库MySQL 进入华为云官网，登录华为云账号。 搜索云数据库MySQL，单击立即购买，进入购买数据库实例页面，如下图，根据界面提示，填写要购买的数据库实例信息，如下表所示。 图1 购买数据库实例页面 表1 购买数据库实例参数说明 参数名称 参数说明 取值样例 计费模式 必选参数

查看更多 →

Flink业务程序无法读取NFS盘上的文件 用户问题 Flink业务程序无法读取集群节点挂载的NFS盘上的文件。 问题现象 用户开发的Flink业务程序中需要读取用户定义的配置文件，该配置文件放在NFS盘上，NFS盘是挂载在集群节点上的，集群的所有节点均可以访问该盘。用户提交Fl

查看更多 →

DatabaseFile object 数据库文件。 description 否 String 数据库描述。 最小长度：0 最大长度：1024 表4 DatabaseFile 参数 是否必选 参数类型 描述 source 是 String 数据库文件来源。 枚举值： public private

查看更多 →

配置Hive读取关系型数据库 操作场景 Hive支持创建与其他关系型数据库关联的外表。该外表可以从关联到的关系型数据库中读取数据，并与Hive的其他表进行Join操作。 目前支持使用Hive读取数据的关系型数据库如下： DB2 Oracle 前提条件 已安装Hive客户端。 操作步骤

查看更多 →

对象存储 对象存储服务（OBS） 支持按文件分片。 文件系统 FTP 支持按文件分片。 SFTP 支持按文件分片。 HTTP 支持按文件分片。 关系型数据库 云数据库 MySQL 支持按表字段分片。 仅当配置“按表分区抽取”时，按表分区分片。 云数据库 PostgreSQL 支持按表字段分片。

查看更多 →

成长地图 | 云数据库 GaussDB (for MySQL) 云数据库 GaussDB(for MySQL) GaussDB(for MySQL)是华为自研的最新一代企业级高扩展海量存储云原生数据库，完全兼容MySQL。基于华为最新一代DFV存储，采用计算存储分离架构，128TB

查看更多 →

使用DRS迁移到GaussDB(for MySQL)数据。 使用mysqldump迁移到GaussDB(for MySQL)数据。 发布区域：全部 使用DRS迁移数据 使用mysqldump迁移数据 重置管理员密码 在使用GaussDB(for MySQL)过程中，如果忘记数据库帐号密码，可以重新设置密码。

查看更多 →

数据库类—MySQLDelete 适用于MySQLDelete删除操作使用。 参数 是否必选 参数类型 描述 Ip 是 String 数据库ip：如果是华为云RDS实例，需要绑定EIP，并保证实例端口安全组策略开启放行，详细请参考华为云：通过公网连接MySQL实例。 Port 是

查看更多 →

MySQL CDC源表 功能描述 MySQL的CDC源表，即MySQL的流式源表，会先读取数据库的历史全量数据，并平滑切换到Binlog读取上，保证数据的完整读取。 前提条件 MySQL CDC要求MySQL版本为5.7或8.0.x。 该场景作业需要DLI与MySQL建立增强型跨

查看更多 →

云数据库GaussDB(for MySQL)监控指标说明 功能说明 本节定义了云数据库GaussDB(for MySQL)上报云监控的监控指标的命名空间，监控指标列表和维度定义，用户可以通过云监控提供的API接口来检索云数据库GaussDB(for MySQL)产生的监控指标和告警信息。

查看更多 →

Spark作业的实际资源使用情况 将Spark作业结果存储在MySQL数据库中，缺少pymysql模块，如何使用python脚本访问MySQL数据库？ 如何在DLI中运行复杂PySpark程序？ Spark作业访问MySQL数据库的方案 如何通过JDBC设置spark.sql.shuffle

查看更多 →

bytes/s 测量对象：数据库 监控实例类型：MySQL实例 rds015_innodb_read_count InnoDB文件读取频率 该指标用于统计Innodb平均每秒从文件中读的次数，以次/秒为单位。 ≥ 0 counts/s 测量对象：数据库 监控实例类型：MySQL实例 rds0

查看更多 →

其他云MySQL迁移到云数据库 RDS for MySQL 最佳实践概述 资源规划 操作流程 创建VPC和安全组 创建RDS for MySQL实例 其他云MySQL实例准备 上云操作 父主题： RDS for MySQL

查看更多 →

其他云MySQL迁移到云数据库 RDS for MySQL 最佳实践概述 资源规划 操作流程 创建VPC和安全组 创建RDS for MySQL实例 其他云MySQL实例准备 上云操作 父主题： 实时迁移

查看更多 →