中软国际数据治理专业服务解决方案实践

-g gdsgrp gds_user 修改数据 服务器 上数据文件及数据文件目录“/input_data”的属主为gds_user。 chown -R gds_user:gdsgrp /input_data 以gds_user用户登录数据服务器上启动GDS。 其中GDS安装路径为“/op

查看更多 →

处理数据 在作业总览中平台支持创建数据标记，数据图标、数据回放、数据集等作业，数据包选择相对应的算子就可以触发相对应的作业。 数据回放类型的算子作业不需要选择输出仓库。 数据包类型必须是Rosbag类型。 当选择数据集算子时，数据类型可支持选择通用存储。 创建作业 在左侧菜单栏中，单击“数据处理

查看更多 →

处理数据 入门流程 示例：图片质量变换

查看更多 →

处理数据 处理模拟数据步骤如下。 用户进入DISDemo函数详情页，选择“dis-test”测试事件，单击“测试”，测试函数，如图1所示。 图1 配置测试事件 函数执行成功后，部分函数日志如图2所示，全部的日志信息，可以到“日志”页签查询。 图2 函数执行结果 父主题： 使用函数处理DIS数据

查看更多 →

万兆网的同时，要求数据磁盘组I/O性能大于GDS单核处理能力上限（约400MB/s），才能保证单文件导入速率最大化。 提前做好服务部署规划，数据服务器上，建议一个Raid只布1~2个GDS。GDS跟DN的数据比例建议在1:3至1:6之间。一台加载机的GDS进程不宜部署太多，千兆网

查看更多 →

获取excel导出结果 功能介绍 根据请求导出业务数据（/export-model）时返回的uuid，获取excel导出结果。 调用方法 请参见如何调用API。 URI GET /v2/{project_id}/design/export-result 表1 路径参数 参数 是否必选

查看更多 →

批次文件上传excel 功能介绍 批次文件上传excel URI POST /v1/{project_id}/trace/trace-sweepcode/product-batch/relation/upload-file 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →

批次信息excel下载 功能介绍 批次信息excel下载 URI POST /v1/{project_id}/trace/trace-sweepcode/product-batch/relation/download 表1 路径参数 参数 是否必选 参数类型 描述 project_id

查看更多 →

数据上报失败如何处理？ 若设备是使用接口注册的，请确认设备是否因为没在指定的timeout时间内上线而被物联网平台自动删除了。如果设备已被删除，请重新注册设备再尝试上报数据。 请检查使用接口注册设备时，填写的产品信息是否和产品模型一致。 请检查上报的数据名称是否和产品模型定义的服务属性一致。

查看更多 →

数据上报失败如何处理？ 若设备是使用接口注册的，请确认设备是否因为没在指定的timeout时间内上线而被物联网平台自动删除了。如果设备已被删除，请重新注册设备再尝试上报数据。 请检查使用接口注册设备时，填写的产品信息是否和产品模型一致。 请检查上报的数据名称是否和产品模型定义的服务属性一致。

查看更多 →

无法正常上报数据怎么办？进行排查。 确定以上都不存在问题时，请检查设备和物联网平台之间的网络链路是否畅通，设备是否正常运行。 如果确认设备上报数据成功，但在设备管理服务的历史数据中无法查看到设备上报的数据，请请确保创建应用时已打开“存储历史数据”开关。 父主题： 数据上报（联通用户专用）

查看更多 →

出现字段超长，数据同步失败 执行创建OBS外表的SQL语句时，提示Access Denied GDS导入失败后，磁盘占用空间增大 GDS导入数据时，脚本执行报错：out of memory 使用GDS传输数据的过程中，报错：connection failure error 使用DataArts

查看更多 →

请确保需要导入的sheet表头不含空单元格，否则该sheet内数据导入失败。 仅数字、日期、布尔（默认为检查框）可以自动识别字段类型，其他内容默认文本。 选择需导入的工作表并预览数据，单击“下一步”。 在“数据预览”页签的“工作表”处选择需导入的sheet页数据，下方预览数据。 图2 数据预览 设置事件模板名称和表单字段类型，单击“生成表单”。

查看更多 →

0/24 -l /opt/gds/gds04_log.txt -D #TPC-DS使用 命令中的斜体部分请根据实际填写，如果数据分片存放至多个数据盘目录，需要启动对应目录数量的GDS。 如果TPC-H和TPC-DS数据同时测试，需要启动以上4个GDS，如果只测试TPC-D

查看更多 →

gdsgrp gds_user 修改数据服务器上数据文件目录“/output_data”的属主为gds_user。 1 chown -R gds_user:gdsgrp /output_data 以gds_user用户登录数据服务器上分别启动GDS。 其中GDS安装路径为“/

查看更多 →

创建GDS外表 外表中配置了数据源格式信息、GDS服务的访问信息，从而 GaussDB (DWS)最终可以通过外表将数据服务器上的数据引流进数据库实表中。 操作步骤 收集数据源格式信息、GDS服务的访问信息。 需要收集的主要数据源格式信息如下： format：GDS外表导入支持 CS V

查看更多 →

步骤7：停止GDS 待导入数据成功后，停止GDS。 操作步骤 以gds_user用户登录安装GDS的数据服务器。 请使用以下方式停止GDS。 执行如下命令，查询GDS进程号。其中GDS进程号为128954。 ps -ef|grep gds gds_user 128954

查看更多 →

创建GDS外表 外表中配置了数据源格式信息、GDS服务的访问信息，从而GaussDB最终可以通过外表将数据服务器上的数据引流进数据库实表中。 操作步骤 收集数据源格式信息、GDS服务的访问信息。 需要收集的主要数据源格式信息如下： format：GDS外表导入支持CSV、TEXT

查看更多 →

请确保需要导入的sheet表头不含空单元格，否则该sheet内数据导入失败。 仅数字、日期、布尔（默认为检查框）可以自动识别字段类型，其他内容默认文本。 选择需导入的工作表并预览数据，单击“下一步”。 在“数据预览”页签的“工作表”处选择需导入的sheet页数据，下方预览数据。 图2 数据预览 设置事件模板名称和表单字段类型，单击“生成表单”。

查看更多 →

查看报告Excel状态 功能介绍 根据任务ID查看报告Excel状态 URI GET /v1/{project_id}/sbc/report/excel/status 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 用户project_id

查看更多 →

数据处理 数据处理简介 数据批导 数据处理 回放仿真

查看更多 →