中软国际数据治理专业服务解决方案实践

连接器中查询数据的执行动作定时(每隔1min)查询B1中未同步的数据； 遍历查询出的所有未同步数据，对每条数据单独处理； 按照OA创建数据接口要求，将B1查询出的数据构造成OA接口的请求格式； 使用OA连接器中创建数据的执行动作，调用OA创建数据接口，在OA中创建数据； 如果在O

查看更多 →

为导入用户设置OBS桶的读取权限。 在从OBS导入数据到集群时，执行导入操作的用户需要取得数据源文件所在OBS桶的读取权限。通过配置桶的ACL权限，可以将读取权限授予指定的用户账号。 具体请参见《对象存储服务控制台指南》中的配置桶ACL章节。 创建外表 连接GaussDB(DWS)数据库。 创建外表。

查看更多 →

从Hive读取数据再写入HBase 场景说明 Java样例代码 Scala样例代码 Python样例代码 父主题： 开发程序

查看更多 →

示例2：从MY迁移数据 下面示例演示如何通过CopyManager从MY向GaussDB进行数据迁移的过程。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29

查看更多 →

步骤4：创建增强型跨源连接 创建DLI连接Kafka的增强型跨源连接 在Kafka管理控制台，选择“Kafka专享版”，单击对应的Kafka名称，进入到Kafka的基本信息页面。 在“连接信息”中获取该Kafka的“内网连接地址”，在“基本信息”的“网络”中获取该实例的“虚拟私有云”和“子网”信息，方便后续操作步骤使用。

查看更多 →

步骤4：创建增强型跨源连接 创建DLI连接Kafka的增强型跨源连接 在Kafka管理控制台，选择“Kafka专享版”，单击对应的Kafka名称，进入到Kafka的基本信息页面。 在“连接信息”中获取该Kafka的“内网连接地址”，在“基本信息”的“网络”中获取获取该实例的“虚拟私有云”和“子网”信息，方便后续操作步骤使用。

查看更多 →

从Hive读取数据再写入HBase 场景说明 Java样例代码 Scala样例代码 Python样例代码 父主题： 开发程序

查看更多 →

单击“我的空间”，在交换数据空间实例中，选择实例，单击实例卡片上的“连接器”。 然后选择连接器，单击连接器卡片上的“前往”，进入连接器控制台界面。 选择界面左侧导航栏中的“数据目录”，选择“发出的数据”，进入“发出的数据”界面。 单击已生效合约对应的“消息”，在弹出的“消息”页签中输入留言的内容，单击“

查看更多 →

“目标区域”：选择您需要将该数据集下载到的区域位置，如“华北-北京四”。 “数据类型”：根据实际情况选择该数据集的数据类型。 “数据集输入位置”：AI Gallery的数据集下载到OBS的路径，此位置会作为数据集的数据存储路径，数据集输入位置不能和输出位置相同。 “数据集输出位置”：数据集输出位置

查看更多 →

使用CDL从Opengauss同步数据到Hudi 操作场景 本章节指导用户通过开启Kerberos认证的集群的CDLService WebUI界面从Opengauss导入数据到Hudi。 该章节内容适用于MRS 3.3.0及之后版本支持。 前提条件 集群已安装CDL、Hudi服务且运行正常。

查看更多 →

使用CDL从Hudi同步数据到DWS 操作场景 本章节指导用户通过MRS 3.2.0版本开启Kerberos认证的集群的CDLService WebUI界面，从Hudi导入数据到DWS。 前提条件 集群已安装CDL、Hudi服务且运行正常。 DWS数据库需要开启前置要求，操作步骤请参考DWS数据库前置准备。

查看更多 →

数据库连接后在Superset上显示的名称。 单击“CONNECT”连接数据库。 单击“FINISH”，在列表中查看连接的数据库。 添加数据集 有了数据源后，需要创建一个数据集来支持后续的图表创建。 选择“数据集”页签，单击“+数据集”。 单击“新增”，添加的表已经显示在数据集列表中。 制作图表 Su

查看更多 →

数据库连接后在Superset上显示的名称。 单击“CONNECT”连接数据库。 单击“FINISH”，在列表中查看连接的数据库。 添加数据集 有了数据源后，需要创建一个数据集来支持后续的图表创建。 选择“数据集”页签，单击“+数据集”。 单击“新增”，添加的表已经显示在数据集列表中。 制作图表 Su

查看更多 →

“搭建平台易，运营平台难”的问题，有效支持企业客户持续稳健运营，达成差旅管理目标，实现商业成功。 系统集成 通过华为云数字化差旅管理平台开放的API能力，提供统一的接口规范。企业可以使用自己的IT系统或自有差旅应用访问差旅的资源和服务，供应商和服务商也可以快速接入平台提供资源和服务，共享华为云慧通差旅的资源及服务。

查看更多 →

场景四：从DDM实例导出数据 场景介绍 因为业务使用需要，将DDM实例的数据导出成SQL文本文件。 使用须知 本阶段会在一定程度上影响DDM实例以及RDS for MySQL实例性能，请选择在业务低峰时间导出。 请选择在大磁盘上进行mysqldump操作，保证磁盘空间充足。 在L

查看更多 →

检查磁盘空间，确保没有出现告警且余量满足导入、导出数据的大小。 如果设置的作业需要使用指定YARN队列功能，该用户需要已授权有相关YARN队列的权限。 设置任务的用户需要获取该任务的执行权限，并获取该任务对应的连接的使用权限。 操作前需要进行如下配置： 获取关系型数据库对应的驱动jar包保存在Loade

查看更多 →

检查磁盘空间，确保没有出现告警且余量满足导入、导出数据的大小。 如果设置的作业需要使用指定YARN队列功能，该用户需要已授权有相关YARN队列的权限。 设置任务的用户需要获取该任务的执行权限，并获取该任务对应的连接的使用权限。 操作前需要进行如下配置： 获取关系型数据库对应的驱动jar包保存在Loade

查看更多 →

大屏数据处理应用模板 描述 大屏数据处理应用模板，可配合组件资产“大屏Demo”使用。 开放能力 大屏数据处理应用模板为APP资产，提供服务能力。 服务 说明 getTodayForDmax 该服务用于获取当天时间。 getTaskStatusNum 该服务用于获取各任务状态的具体数量。

查看更多 →

检查磁盘空间，确保没有出现告警且余量满足导入、导出数据的大小。 如果设置的作业需要使用指定YARN队列功能，该用户需要已授权有相关YARN队列的权限。 设置任务的用户需要获取该任务的执行权限，并获取该任务对应的连接的使用权限。 操作前需要进行如下配置： 获取关系型数据库对应的驱动jar包保存在Loade

查看更多 →

图数据的格式 一般图数据格式 动态图数据格式 父主题： 元数据操作

查看更多 →

检查磁盘空间，确保没有出现告警且余量满足导入、导出数据的大小。 如果设置的作业需要使用指定YARN队列功能，该用户需要已授权有相关YARN队列的权限。 设置任务的用户需要获取该任务的执行权限，并获取该任务对应的连接的使用权限。 操作前需要进行如下配置： 获取关系型数据库对应的驱动jar包保存在Loade

查看更多 →