Kafka消息格式 同步到Kafka集群中的数据以Avro、JSON和JSON-C格式存储。不同链路支持的数据格式可参考表1： 表1 支持的数据格式 数据流向 Avro JSON JSON-C MySQL->Kafka 支持 支持 支持 Oracle->Kafka 支持 支持 暂不支持

查看更多 →

存储格式 Relation Index Undo 父主题： Ustore存储引擎

查看更多 →

存储格式 RCR Uheap UBTree Undo Enhanced Toast 父主题： Ustore存储引擎

查看更多 →

存储格式 RCR Uheap UBTree Undo Enhanced Toast 父主题： Ustore存储引擎

查看更多 →

存储格式 Relation Index Undo 父主题： Ustore存储引擎

查看更多 →

数据转发至Kafka存储 场景说明 对于设备上报的数据，可以选择让平台将设备上报数据推送给应用服务器，由应用服务器进行保存；还可以选择让平台将设备上报数据转发给分布式消息服务（Kafka），由Kafka进行存储。 本示例为将所有设备上报的数据转发至Kafka存储。 购买Kafka实例

查看更多 →

数据格式转换 数据传输格式转换，用于JSON格式与XML格式数据的互转。 连接参数 数据传输格式转换连接器无需认证，无连接参数。 将JSON格式转换为XML格式 输入参数 需要转换的JSON，相关参数说明请参考表1。 表1 JSON格式转换为XML格式输入参数说明 参数 说明 JSON

查看更多 →

数据包格式 上传数据格式 转换后数据格式 消息topic格式规范 消息topic格式示例 父主题： 源数据包

查看更多 →

数据存储 如何对OBS的文件重命名？ Notebook停止或者重启后，“/cache”下的文件还存在么？如何避免重启？ 如何使用pandas库处理OBS桶中的数据？ 在Notebook中，如何访问其他账号的OBS桶？ JupyterLab默认工作路径是什么？ 父主题： Notebook

查看更多 →

上传数据格式 在使用Octopus平台收集数据前，请仔细阅读本章节，确保上传数据格式符合平台要求，有助于用户更快速的完成数据收集以及数据格式转换。 上传数据格式：Rosbag包+与数据包同名的yaml文件，单包上传大小小于100G。 转换后数据格式：OpenData格式（内必含O

查看更多 →

数据包格式 上传数据格式 转换后数据格式 消息topic格式规范 消息topic格式示例 父主题： 数据批导

查看更多 →

数据格式规范 推荐系统OBS文件夹规范 离线数据源 实时日志 全局特征信息文件 父主题： 用户指南（旧版）

查看更多 →

上传数据格式 在使用Octopus平台收集数据前，请仔细阅读本章节，确保上传数据格式符合平台要求，有助于用户更快速的完成数据收集以及数据格式转换。 上传数据格式：Rosbag包+与数据包同名的yaml文件，单包上传大小小于100G。 转换后数据格式：OpenData格式（内必含O

查看更多 →

上传数据格式 在使用Octopus平台收集数据前，请仔细阅读本章节，确保上传数据格式符合平台要求，有助于用户更快速的完成数据收集以及数据格式转换。 上传数据格式：Rosbag包+与数据包同名的yaml文件，单包上传大小小于100G。 转换后数据格式：OpenData格式（内必含O

查看更多 →

图数据的格式 一般图数据格式 动态图数据格式 父主题： 元数据操作

查看更多 →

不能包含空行或者空列。即某一行没有数据，或者某一列没有数据。 数据列数必须与表头列数相同。如：表头有10列数据，非表头数据必须也得有10列。 文件至少包含一列时间序列数据。 系统会自动解析时间数据格式。系统支持的时间格式请参考时间格式。 文件至少包含一列指标数据。系统会自动解析数据格式，将数值类型的数据识别为指标数据。

查看更多 →

操作Avro格式数据 场景说明 用户可以在Spark应用程序中以数据源的方式去使用HBase，本例中将数据以Avro格式存储在HBase中，并从中读取数据以及对读取的数据进行过滤等操作。 数据规划 在客户端执行hbase shell，进入HBase命令行，使用下面的命令创建样例代码中要使用的HBase表：

查看更多 →

对接对象存储代理兼容实例格式 操作场景 当对不同存储类型（OBS或MINIO）中的对象实例进行操作时，为了实现实例格式的兼容性，需要对不同存储类型中的对象实例配置存储代理连接器。 新建对象存储代理连接器 参考登录AstroZero新版应用设计器中操作，进入新版应用设计器。 在左侧导航栏中，选择“集成”。

查看更多 →

表4 对象存储 参数 说明 云存储类型 选择“对象存储”。 对象存储有标准存储和低频访问存储两个存储类型，主要适用于大数据分析、原生云应用程序数据、静态网站托管、备份/活跃归档等场景。 分配方式 使用已有存储 选择已创建的对象存储卷。您需要提前创建对象存储卷，请参考对象存储（OBS）。

查看更多 →

更改Broker角色的存储目录需要重新启动服务，服务重启时无法访问。 更改Broker单个实例的存储目录需要重新启动实例，该节点Broker实例重启时无法提供服务。 服务参数配置如果使用旧的存储目录，需要更新为新目录。 前提条件 在各个数据节点准备并安装好新磁盘，并格式化磁盘。 已安装好Kafka客户端。

查看更多 →

转换后数据格式 Octopus平台支持将上传的Rosbag格式转换为OpenData格式。 数据类型 Octopus平台对数据有以下要求： 数据类型：包括各传感器数据、车辆数据、目标推理数据、自车坐标姿态以及标签记录数据等。 数据格式：Octopus OpenData格式。其中相机采集数据文件后缀为“

查看更多 →