如何读取“__consumer_offsets”内部topic的内容 用户问题 Kafka如何将consumer消费的offset保存在内部topic“ __consumer_offsets”中？ 处理步骤 以客户端安装用户，登录安装Kafka客户端的节点。 切换到Kafka客户

查看更多 →

读取文件报错，如何正确读取文件 问题现象 创建训练作业如何读取“json”和“npy”文件。 训练作业如何使用cv2库读取文件。 如何在MXNet环境下使用torch包。 训练作业读取文件，出现如下报错： NotFoundError (see above for traceback):

查看更多 →

接入MySQL数据源 DataArts Insight支持连接MySQL数据源。本文为您介绍如何在DataArts Insight上接入MySQL数据源。 DataArts Insight连接MySQL有以下方式： 公网连接方式：如果是非当前账号下的云服务资源，建议使用公网连接方式，且数据源需绑定弹性公网IP。

查看更多 →

选择界面左侧导航栏中的“连接器管理 > 数据源管理”，进入“数据源管理”界面。 单击数据源列表上方“新增数据源”，进入“新增数据源”界面，设置MYSQL数据源的基本信息，具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 MYSQL：MYSQL是一款小型关联式数据库管理系统，用户可以读取存放在MYSQL的业务数据，将数据上传到EDS上。

查看更多 →

在左侧的导航栏选择“数据源管理”，单击页面右上角的“接入数据源”。 在接入数据源页面的“默认数据源”页签下，选择“MySQL”类型的数据源，然后单击“下一步”。 在页面中配置数据源的连接信息。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据规划自定义。

查看更多 →

添加MySQL数据源 本章节适用于 MRS 3.3.0及之后的版本。 HetuEngine支持配置MySQL数据源实现对MySQL数据源的接入与查询功能。本章节指导用户在集群的HSConsole界面添加MySQL类型的JDBC数据源。 添加MySQL数据源前提条件 数据源与HetuEngine集群节点网络互通。

查看更多 →

接入MySQL数据源 概述 应用模型支持把MySQL作为一种数据源类型，并用于模型采集。在使用MySQL数据源前，您需要先接入数据源。 操作步骤 在开天 集成工作台 界面中，选择左侧导航栏中的“应用模型 > 实例管理”，单击实例“控制台”。 选择“模型采集 > 数据源”，单击“创建数

查看更多 →

模型采集 > 数据源”，单击“创建数据源”，进入创建数据源页面。接着选择“MySQL”类型的数据源，创建方式选择 “创建数据源”，然后在数据源输入框中输入数据源名称。 在页面中配置数据源的连接信息，如下表所示。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称，根据

查看更多 →

接入 GaussDB (for MySQL)数据源 概述 ROMA Connect支持把GaussDB(for MySQL)数据库作为一个数据源，并用于数据集成任务。在使用GaussDB(for MySQL)数据源前，您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下

查看更多 →

数据源如何收费？ 数据源的收费包括三项。 “OBS存储”：将离线数据源上传至OBS进行存储，根据存储空间大小进行计费。详见OBS计费详情。 “画像数据”：在数据源导入数据成功后，按每小时每百万条画像进行计费，在删除数据源后，将停止计费。 “训练作业”：在创建离线作业和导入实时数据

查看更多 →

Spark jar 如何读取上传文件 Spark可以使用SparkFiles读取 –-file中提交上来的文件的本地路径，即：SparkFiles.get("上传的文件名")。 Driver中的文件路径与Executor中获取的路径位置是不一致的，所以不能将Driver中获取到的

查看更多 →

数据库名 单击“获取数据库”，在列表框中选择数据库。 填写完数据源信息后，单击“确定”即可完成RDS MySQL数据连接的添加。 使用RDS MySQL数据源 您可以参照使用 数据仓库 服务（DWS）数据源，配置使用RDS MySQL数据源。 父主题： 新建数据连接

查看更多 →

如何读取函数的请求头？ 函数入口中的第一个参数里面包含请求头，您可以打印函数执行结果，从而获取想要的字段。 如下图，event为函数入口的第一个参数，headers为请求头。 父主题： 函数执行

查看更多 →

参考创建数据集成任务（普通任务）接入源端自定义数据源和目标端MySQL数据源，并创建定时任务。完成后运行任务，可以将源端自定义的数据源中的数据，迁移到MySQL数据源的表中。 执行任务后，FDI会根据自定义连接实例定义的连接地址（http://127.0.0.1:19091/mysql）去读取或写入数据，读接口

查看更多 →

请参见创建集群。 如果MySQL数据源不在华为云上，其所在的主机必须具有公网IP地址，并且 CDM 集群也必须绑定弹性IP（EIP）。 如果MySQL数据源在华为云上，MySQL数据源所在的主机必须和CDM集群在相同的区域、可用区和VPC。 如果MySQL数据源所在的主机开启了防火墙

查看更多 →

Sqoop如何连接MySQL 用户问题 Sqoop如何连接MySQL数据库。 处理步骤 在集群上安装客户端，查看客户端“sqoop/lib”目录下是否有MySQL驱动包。 在客户端目录下加载环境变量。 source bigdata_env 执行Kerberos用户认证。 如果集群

查看更多 →

可选参数，单击“添加”可增加多个指定数据源的JDBC连接器的属性，参考对应数据库的JDBC连接器说明文档进行配置。 常见配置举例如下： socketTimeout：配置JDBC连接超时时间，单位为毫秒。 mysql.bool.type.transform：配置mysql读取时，是否将tinyin

查看更多 →

mod引入需要的依赖，是使用MAS-GO-SDK的基础。 配置创建数据源。 通过配置数据源驱动信息，引入MAS-GO-SDK-Mysql创建数据源。 支持以代码方式添加配置信息或者从YAML文件读取配置信息。 按需引入数据源。 在需要使用数据源的地方引入并执行Mysql操作。 父主题： 概述

查看更多 →

可选参数，单击“添加”可增加多个指定数据源的JDBC连接器的属性，参考对应数据库的JDBC连接器说明文档进行配置。 常见配置举例如下： socketTimeout：配置JDBC连接超时时间，单位为毫秒。 mysql.bool.type.transform：配置mysql读取时，是否将tinyin

查看更多 →

已准备源集群，例如，MySQL服务端集群。 Doris集群与MySQL服务端集群网络互通。 已安装MySQL客户端，相关操作可参考使用MySQL客户端连接Doris。 通过JDBC Catalog查询MySQL/Doris数据 进入MySQL官网（https://www.mysql.com/），选择“DOWNLOADS

查看更多 →

如何准备MRS的数据源？ MRS既可以处理OBS中的数据，也可以处理HDFS中的数据。在使用MRS分析数据前，需要先准备数据。 将本地数据上传OBS。 登录OBS管理控制台。 在OBS上创建userdata并行文件系统，然后在userdata文件系统下创建program、input、output和log文件夹。

查看更多 →