使用Scan读取数据 功能简介 要从表中读取数据，首先需要实例化该表对应的Table实例，然后创建一个Scan对象，并针对查询条件设置Scan对象的参数值，为了提高查询效率，最好指定StartRow和StopRow。查询结果的多行数据保存在ResultScanner对象中，每行数

查看更多 →

使用Get读取数据 功能介绍 要从表中读取一条数据，首先需要实例化该表对应的Table实例，然后创建一个Get对象。也可以为Get对象设定参数值，如列族的名称和列的名称。查询到的行数据存储在Result对象中，Result中可以存储多个Cell。 针对开启冷热分离特性的列族，可以

查看更多 →

读取Hudi数据概述 Hudi的读操作，作用于Hudi的三种视图之上，可以根据需求差异选择合适的视图进行查询。 Hudi支持多种查询引擎Spark、Hive、HetuEngine，具体支持矩阵见表1和表2。 表1 cow表 查询引擎 实时视图/读优化视图 增量视图 Hive Y Y

查看更多 →

读取Hudi数据概述 Hudi的读操作，作用于Hudi的三种视图之上，可以根据需求差异选择合适的视图进行查询。 Hudi 支持多种查询引擎Spark和Hive，具体支持矩阵见表1和表2。 表1 cow表 查询引擎 实时视图/读优化视图 增量视图 Hive Y Y Spark（SparkSQL）

查看更多 →

获取本地上传文件列表 功能介绍 获取本地上传文件列表。 URI URI格式 GET /softcomai/datalake/collection/v1.0/upload/records 参数说明 无。 请求 请求样例 GET https://ip:port/softcomai/d

查看更多 →

获取TOUCH ROM升级文件列表 接口名称 WEB_GetTouchUpgradeFilesAPI(后续废弃) 功能描述 获取TOUCH ROM升级文件列表 应用场景 获取TOUCH ROM升级文件列表 URL https://ip/action.cgi?ActionID=WE

查看更多 →

查询驱动文件列表(不再推广） 功能介绍 查询驱动文件列表。 接口约束 目前仅支持DB2 for LUW为源的同步场景使用。 仅支持部分Region使用，详情参考终端节点。 URI GET /v5/{project_id}/jdbc-drivers 表1 路径参数 参数 是否必选 参数类型

查看更多 →

大量数据文件，训练过程中读取数据效率低？ 当数据集存在较多数据文件（即海量小文件），数据存储在OBS中，训练过程需反复从OBS中读取文件，导致训练过程一直在等待文件读取，效率低。 解决方法 建议将海量小文件，在本地压缩打包。例如打包成.zip格式。 将此压缩后的文件上传至OBS。

查看更多 →

读取输出口显示内容 接口名称 WEB_GetVideoOutSourceAPI 功能描述 读取输出口显示内容时调用该接口。 应用场景 读取输出口显示内容。 URL https://ip/action.cgi?ActionID=WEB_GetVideoOutSourceAPI 参数

查看更多 →

训练过程读取数据 在ModelArts上训练模型，输入输出数据如何配置？ 如何提升训练效率，同时减少与OBS的交互？ 大量数据文件，训练过程中读取数据效率低？ 使用Moxing时如何定义路径变量？ 父主题： Standard训练作业

查看更多 →

使用Scan读取HBase数据 功能简介 要从表中读取数据，首先需要实例化该表对应的Table实例，然后创建一个Scan对象，并针对查询条件设置Scan对象的参数值，为了提高查询效率，最好指定StartRow和StopRow。查询结果的多行数据保存在ResultScanner对象

查看更多 →

配置Hive读取Hudi表 Hudi表对应的Hive外部表介绍 Hudi源表对应一份HDFS的数据，通过Spark组件、Flink组件或者Hudi客户端，可以将Hudi表的数据映射为Hive外部表，基于该外部表，Hive可以进行实时视图查询、读优化视图查询以及增量视图查询。 根据

查看更多 →

查询与我有关的文件列表 功能介绍 查询与我有关的文件列表。 URI GET /koodrive/ose/v1/related 表1 Query参数 参数 是否必选 参数类型 描述 pageSize 否 Integer 每页返回的个数，默认是100，可接受值最大值是100。注意在到

查看更多 →

String 文件名 create_user_id String 文件创建者用户ID create_user_name String 文件创建者用户名 update_user_id String 文件修改者用户ID update_user_name String 文件修改者用户名 share

查看更多 →

通过Sqoop读取MySQL数据并写parquet文件到OBS时失败 用户问题 通过Sqoop读取MySQL数据，然后直接写到OBS，指定parquet格式时写入报错，不指定parquet时不报错。 问题现象 原因分析 parquet格式不支持hive3，用Hcatalog方式写入。

查看更多 →

使用Get读取HBase数据 功能简介 要从表中读取一条数据，首先需要实例化该表对应的Table实例，然后创建一个Get对象。也可以为Get对象设定参数值，如列族的名称和列的名称。查询到的行数据存储在Result对象中，Result中可以存储多个Cell。 代码样例 以下代码片段在com

查看更多 →

在弹出的提示框中，单击“确定”。 读取数据需要等待一段时间，您可以单击刷新数据源的状态，当“状态”为“读取成功”即表示成功将本地数据库的物理表读取至应用设计态。 读取成功后，xDM-F会根据读取的物理表数据自动生成相应的建模信息和物理表信息，这些信息后续会被反向生成相应的数据模型和属性。

查看更多 →

查询我最近访问的文件列表 功能介绍 查询我最近访问的文件列表 URI GET /koodrive/ose/v1/access 请求参数 表1 请求Header参数 参数 是否必选 参数类型 描述 X-Traceid 否 String 业务跟踪id（必须58位） Authorization

查看更多 →

通过标签查询文件系统列表 功能介绍 通过标签查询文件系统列表 调试 您可以在 API Explorer 中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI POST /v1/{project_id}/sfs-tu

查看更多 →

获取文件系统异步任务列表 功能介绍 获取文件系统异步任务列表。仅支持查询目录资源使用情况的任务，API请求路径的feature取值为dir-usage，以下简称为DU任务。 接口约束 在2023年8月1号之后创建的文件系统支持该API操作。后端有5min的缓存时间，查询的数据可能

查看更多 →

mode=INCREMENTAL;--必须设置当前表读取为增量读取模式。 set hoodie.tableName.consume.start.timestamp=20201227153030;--指定初始增量拉取commit。 set hoodie.tableName.consume.end.timestamp=20210308212318;

查看更多 →