中软国际数据治理专业服务解决方案实践

配置数据导入模板 使用说明 通过定义数据导入模板，定义后下载模板，录入数据，再导入数据并按照预定义的脚本处理数据。 场景描述 本节介绍的是在应用内配置数据导入模板，您还可以在管理中心进行配置，相关操作请参考通过配置数据导入模板进行数据导入。两者的区别是在应用中配置的数据导入模板，

查看更多 →

导入项目数据 功能介绍 导入项目数据 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v1/{project_id}/eihealth-projects/

查看更多 →

导入网上数据 功能介绍 导入网上数据 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v1/{project_id}/eihealth-projects/

查看更多 →

导入数据最佳实践 从OBS并行导入数据 将导入数据拆分为多个文件 导入大数据量的数据时，通常需要较长的时间及耗费较多的计算资源。 从OBS上导入数据时，如下方法可以提升导入性能：将数据文件存储到OBS前，尽可能均匀地将文件切分成多个，文件的数量为DN的整数倍更适合。 在导入前后验证数据文件

查看更多 →

导入数据实例 操作场景 用户的数据实例数据较多时，手动在控制台添加会比较耗时。工业数字模型驱动引擎-数据建模引擎（xDM Foundation，简称xDM-F）提供了导入数据实例的功能，用户可以通过上传Excel文件，一次性批量导入数据实例。导入数据实例前，您可以先参见导出数据实

查看更多 →

使用Loader从S FTP服务器 导入数据到Hive 操作场景 该任务指导用户使用Loader将数据从SFTP 服务器 导入到Hive。 前提条件 创建或获取该任务中创建Loader作业的业务用户和密码。 确保用户已授权访问作业中指定的Hive表的权限。 获取SFTP服务器使用的用户和

查看更多 →

WebUI”后的链接，进入HSConsole界面。 单击“数据源”，在Hive数据源所在行的“操作”列下单击“编辑”，在页面内新增如下自定义配置： 表1 元数据超时参数 参数名称 默认值 描述 hive.metastore-timeout 10s 共部署Hive数据源加载元数据缓存最大超时时间，单位为秒或分钟

查看更多 →

接入HIVE数据源 概述 ROMA Connect支持把HIVE作为一个数据源，用于创建数据API。在使用HIVE数据源前，您需要先接入数据源。 数据集成中仅支持百万以内数据量。 前提条件 每个接入的数据源都要归属到某个集成应用下，在接入数据源前您需要有可用的集成应用，否则请提前创建集成应用。

查看更多 →

登录智能数据洞察控制台。 单击“数据源> 新建数据源”，进入新建数据源页面，源库类型选择数据Hive，接入网络类型选择公网。 填写其他参数，参数说明如表1所示。 图1 接入Hive数据源参数 表1 参数说明 参数名称 是否必填 说明 源库类型 是 接入的数据源类型，本示例为Hive。更多数据源类型连接请参考表1。

查看更多 →

导入并配置Hive JDBC/HCatalog样例工程 操作场景 为了运行 MRS 产品Hive组件的JDBC接口样例代码，需要完成下面的操作。 本章节以在Windows环境下开发JDBC/HCatalog方式连接Hive服务的应用程序为例。 HCatalog样例仅支持在Linux节点上运行。

查看更多 →

导入并配置Hive JDBC/HCatalog样例工程 操作场景 为了运行MRS产品Hive组件的JDBC/HCatalog接口样例代码，需要完成下面的操作。 以在Windows环境下开发JDBC/HCatalog方式连接Hive服务的应用程序为例。 HCatalog样例仅支持在Linux节点上运行。

查看更多 →

Hive ORC数据存储优化 操作场景 “ORC”是一种高效的列存储格式，在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端，具体操作请参见Hive客户端使用实践。 操作步骤 推荐：使用“SNAPPY”压缩，适用于压缩比和读取效率要求均衡场景。

查看更多 →

填写数据源的描述信息。 数据湖分层 选择对应的数据湖分层：业务数据层/操作数据层/明细数据层/数据汇总层/数据集市层/应用数据层/贴源数据层。 JDBC字符串 Hive数据库的JDBC格式连接串，格式：jdbc:hive2://host:port/dbname。 host为数据库的连接地址。 port为数据库的连接端口号。

查看更多 →

Hive ORC数据存储优化 操作场景 “ORC”是一种高效的列存储格式，在压缩比和读取效率上优于其他文件格式。 建议使用“ORC”作为Hive表默认的存储格式。 前提条件 已登录Hive客户端，具体操作请参见Hive客户端使用实践。 操作步骤 推荐：使用“SNAPPY”压缩，适用于压缩比和读取效率要求均衡场景。

查看更多 →

添加Hive数据源 Hive数据源介绍 HetuEngine服务在安装时已经将共部署（与HetuEngine在同一个Hadoop集群）的Hive数据源默认实现对接，数据源名称为“hive”，不可删除。部分默认配置不可修改，如数据源名称，数据源类型，服务端Principal，客户端

查看更多 →

数据库脚本导入 数据库脚本请联系伙伴提供 ulearningdb.sql 可以借用数据库管理工具，这里以Navicat为例： 连接数据库，启动Navicat后，单击左上角“连接”，选择“MySQL” 在如下的弹窗中填写相应的参数，然后单击测试连接，提示连接成功后单击确定 图1 新建连接1

查看更多 →

批量导入作业对象数据 操作步骤 登录ISDP系统，选择“公共平台->业务配置->作业对象”，打开作业对象管理页面 点击“下载导入模板”按钮将导入模板下载到本地 图1 下载作业对象导入模板 打开导入模板批量编辑需要添加的作业对象信息 编辑完成，保存并关闭表格，点击“导入”按钮 上传

查看更多 →

导入数据至盘古平台 数据集是一组用于处理和分析的相关数据样本。存储在OBS服务中的数据或本地数据导入ModelArts Studio大模型开发平台后，将以数据集的形式进行统一管理。 用户将数据导入至平台后，这些数据会生成一个“原始数据集”，用于对导入的数据进行集中管理和进一步操作。

查看更多 →

“ 虚拟专用网络 (VPN)”打通网络，请参见对应服务的用户指南。 从MRS导入数据到集群的流程 MRS集群上的数据准备 （可选）手动创建外部服务器 创建外表 执行数据导入 清除资源 父主题： 从MRS导入数据到集群

查看更多 →

ClickHouse数据导入导出 本章节主要介绍使用ClickHouse客户端导入导出文件数据的基本语法和使用说明。 使用ClickHouse客户端导入导出数据 CS V格式数据导入 clickhouse client --host 主机名/ClickHouse实例IP地址 --database

查看更多 →

1000,1100,1200 在导入数据前，需要注意： MRS 3.3.0之前版本，导入的数据不能包含空格，否则此行数据导入失败并跳过导入，后续操作不受影响。 MRS 3.3.0及之后版本，导入的数据不能包含空格，否则此次数据导入操作会失败，需要对导入数据类型进行自检。 包含,的字段需要使用反引号括起来，例如：hello

查看更多 →