如何读取“__consumer_offsets”内部topic的内容 用户问题 Kafka如何将consumer消费的offset保存在内部topic“ __consumer_offsets”中？ 处理步骤 以客户端安装用户，登录安装Kafka客户端的节点。 切换到Kafka客户

查看更多 →

for xxx://xxx 原因分析 在ModelArts中，用户的数据都是存放在OBS桶中，而训练作业运行在容器中，无法通过访问本地路径的方式访问OBS桶中的文件。 处理方法 读取文件报错，您可以使用Moxing将数据拷贝至容器中，再直接访问容器中的数据。请参见步骤1。 您也可以根

查看更多 →

读取数据库数据 操作场景 本文指导您在应用设计态读取数据库数据。 前提条件 已登录应用设计态。 操作步骤 在左侧导航栏中，选择“数据模型管理 > 反向建模”，进入反向建模页面。 找到需要操作的数据源，单击。 图1 读取数据 在弹出的提示框中，单击“确定”。 读取数据需要等待一段时

查看更多 →

Spark jar 如何读取上传文件 Spark可以使用SparkFiles读取 –-file中提交上来的文件的本地路径，即：SparkFiles.get("上传的文件名")。 Driver中的文件路径与Executor中获取的路径位置是不一致的，所以不能将Driver中获取到的路径作为参数传给Executor去执行。

查看更多 →

数据读取 单表查询 多表连接查询 子查询表达式 WITH表达式 UNION操作符的使用

查看更多 →

读取模型 概述 读取spark pipeline model类型的模型文件。 输入 无 输出 spark pipeline model类型的模型对象 参数说明 参数 参数说明 input_model_path 模型文件所在的路径 样例 params = { "input_model_path":

查看更多 →

数据读取 单表查询 多表连接查询 WITH表达式 跨逻辑集群数据读写

查看更多 →

数据读取 单表查询 多表连接查询 WITH表达式

查看更多 →

读取数据 概述 读取格式化的数据，支持csv、json、parquet等。 输入 无 输出 数据集 参数说明 参数 参数说明 input_file_path 数据文件的绝对路径、相对路径、目录路径或者文件路径均可 format 文件格式，支持csv等 has_header 是否包含表头

查看更多 →

如何读取函数的请求头？ 函数入口中的第一个参数里面包含请求头，您可以打印函数执行结果，从而获取想要的字段。 如下图，event为函数入口的第一个参数，headers为请求头。 父主题： 函数执行

查看更多 →

在AstroFlow中，如何计算总数据调用次数？ 在AstroFlow中，总数据调用次数为流程调用次数、表单调用次数（开发态）、表单调用次数（运行态）和子表单调用次数等之和。不同的AstroFlow实例，总数据调用次数有所不同，其中基础版实例为2万次/年（每月上限为2000次）、

查看更多 →

在AstroZero中，如何实现多人协作开发？ 新版应用设计器 通过在账号下创建用户，可实现多人协作开发。为了方便同一个开发团队成员之间，能够更好的配合开发项目。在AstroZero中，同一个账号下的所有子账号开发的内容都可以互相查看，配合开发。多人登录后，在开发过程中是用锁的机制进行隔离的。

查看更多 →

配置Hive读取关系型数据库 操作场景 Hive支持创建与其他关系型数据库关联的外表。该外表可以从关联到的关系型数据库中读取数据，并与Hive的其他表进行Join操作。 目前支持使用Hive读取DB2和Oracle两种关系型数据库的数据。 前提条件 已安装Hive客户端。 操作步骤

查看更多 →

IGNORE_EXTRA_DATA true 数据源文件中的字段比外表定义列数多时，是否忽略多出的列。默认为false/off。本教程中设为“true”。 true/on：数据源文件中字段比外表定义列数多，则忽略行尾多出来的列。不报错 false/off：若数据源文件中字段比外表定义列数多，做如下报错提示：extra

查看更多 →

在AstroZero中，哪些场景需要访问数据库？ AstroZero访问数据库的场景主要包括如下几类： 业务数据模型构建 通过AstroZero提供的Object可视化创建的方式进行构建。 业务数据CRUD操作 通过AstroZero脚本中的数据库db标准库的相关方法实现，也可以

查看更多 →

例如，10并发压力模式下的任务，在执行过程中，不同的并发随机获取变量中的值。 随机模式 并发模式 每个并发单独复制一个同名变量进行使用，不同并发随机读取变量值，相互不影响。 例如，10并发压力模式下的任务，在执行过程中，每个并发均从复制的变量中，随机读取相应的变量值。 假设变量number有三个变量值分别为1、

查看更多 →

LUME、EXPOSE、ENTRYPOINT、CMD，这些参数在云容器实例中可以按如下方法配置。 ENV为环境变量，在云容器实例中创建负载的时候，可以在高级配置中设置，“ENV VERSION 1.0”指令在CCI中的使用，如下所示。 VOLUME为定义容器卷，通常配合docker

查看更多 →

在Notebook中如何查看GPU使用情况 创建Notebook时，当您选择的类型为GPU时，查看GPU使用情况具体操作如下： 登录ModelArts管理控制台，选择“开发环境>Notebook”。 在Notebook列表中，单击目标Notebook“操作”列的“打开”，进入“Jupyter”开发页面。

查看更多 →

在Notebook中，如何访问其他账号的OBS桶？ 创建Notebook时选择OBS存储，这种情况下只能访问到自己账号下的桶，无法访问到其他账号的OBS桶。 如果需要在Notebook中，访问其他账号的OBS文件，前提是，需获取目标OBS桶的读写权限。 首先，请联系OBS桶的创建

查看更多 →

配置Hive读取关系型数据库数据 操作场景 Hive支持创建与其他关系型数据库关联的外表。该外表可以从关联到的关系型数据库中读取数据，并与Hive的其他表进行Join操作。 目前支持使用Hive读取数据的关系型数据库如下： DB2 Oracle 本章节适用于 MRS 3.x及后续版本。

查看更多 →

读取parquet数据 概述 读取parquet格式的数据。 输入 无 输出 数据集 参数说明 参数 参数说明 input_file_path parquet数据文件所在的路径 样例 params = { "input_file_path": "" # @param {

查看更多 →