数据管理维护 Hudi Compaction操作说明 Hudi Clean操作说明 Hudi Archive操作说明 Hudi Clustering操作说明

查看更多 →

数据管理页 生成数据管理页 发布表单管理页 设置显示列 筛选管理页数据 通过Excel导入数据 全屏查看管理页 修改管理页名称 隐藏管理页 删除管理页 父主题： 表单管理

查看更多 →

数据管理（旧版） 查询数据集列表 创建数据集 查询数据集详情 更新数据集 删除数据集 查询数据集的统计信息 查询数据集监控数据 查询数据集的版本列表 创建数据集标注版本 查询数据集版本详情 删除数据集标注版本 查询样本列表 批量添加样本 批量删除样本 查询单个样本信息 获取样本搜索条件

查看更多 →

管理──数据管理 数据加工 在管理>数据管理>数据加工页面, 可以配置数据解析流程。数据加工会接收采控中心发出的数据，进行加工后可落入特定索引。 数据根据流水线的序号与过滤条件顺序进行处理, 如果数据内容不符合流水线设置的过滤条件, 则跳过此流水线处理。 图1 数据加工 父主题：

查看更多 →

数据管理概述 仿真数据管理提供数据的生命周期管理、使用云端数据进行在线前处理和提交云端求解计算的能力。 仿真数据生命周期管理：支持文件夹生命周期管理（新建、重命名、下载、移动、复制和删除文件夹）和数据生命周期管理（上传、重命名、下载、移动、复制和删除数据）。 提交云端求解（创建作

查看更多 →

Kafka队列开启公网访问 dms DMS kafkas队列开启公网访问，视为“不合规” dms-rabbitmq-not-enable-ssl DMS RabbitMq队列打开SSL加密访问 dms DMS rabbitmqs队列未打开SSL加密访问，视为“不合规” dms-rocketmq-not-enable-ssl

查看更多 →

配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时，源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式：

查看更多 →

元数据管理 更新云服务器元数据 删除云服务器指定元数据 父主题： API

查看更多 →

数据管理常用操作 复制数据 下载数据 删除数据 查看3D 执行数据管理类操作需要项目成员具备相应的权限，详细的权限介绍请参见项目成员和权限。 数据文件的名称，不可以含有特殊字符。如果文件名包含特殊字符，将不支持下载，可通过去除文件名中的特殊字符方式解决。 查看数据作业 数据复制、

查看更多 →

数据管理常用操作 复制数据 解除引用 下载数据 禁止/允许删除数据 删除数据 恢复数据 执行数据管理类操作需要项目成员具备相应的权限，详细的权限介绍请参见项目成员和权限。 数据文件的名称，不可以含有特殊字符。如果文件名包含特殊字符，将不支持下载，可通过去除文件名中的特殊字符方式解决。

查看更多 →

RocketMQ支持的系统权限，请参见：DMS for RocketMQ系统策略。若您需要对除DMS for RocketMQ之外的其它服务授权，IAM支持服务的所有策略请参见系统权限。 DMS for RocketMQ的权限与策略基于分布式消息服务DMS，因此在IAM服务中为DMS for Rock

查看更多 →

Kafka支持的系统策略及策略间的对比，请参见：DMS for Kafka系统策略。若您需要对除DMS for Kafka之外的其它服务授权，IAM支持服务的所有策略请参见权限策略。 DMS for Kafka的权限与策略基于分布式消息服务DMS，因此在IAM服务中为用户组授予DMS for Kafka权

查看更多 →

分布式消息服务Kafka版 DMS Kafka队列打开内网SSL加密访问 DMS Kafka队列打开公网SSL加密访问 DMS Kafka队列开启公网访问 父主题： 系统内置预设策略

查看更多 →

DMS Kafka队列开启公网访问 规则详情 表1 规则详情 参数 说明 规则名称 dms-kafka-public-access-enabled-check 规则展示名 DMS Kafka队列开启公网访问 规则描述 DMS kafkas队列开启公网访问，视为“不合规”。 标签 dms

查看更多 →

元数据管理 权限 对应API接口 授权项（Action） IAM项目（Project） 企业项目（Enterprise Project） 更新 裸金属服务器 元数据 POST /v1/{project_id}/baremetalservers/{server_id}/metadata

查看更多 →

数据管理服务 全量SQL或慢SQL开关 打开或者关闭DAS收集全量SQL开关。开启全量SQL后，本服务会对SQL的文本内容进行存储，以便进行分析。用户可自行设置全量SQL的保存时间范围，到期后会自动删除；如果未设置，数据默认保留7天。 打开或者关闭DAS收集慢SQL开关。开启慢S

查看更多 →

客户端等。 云日志服务支持日志采集向导一站式采集DMS重平衡日志，支持多维度分析，并为DMS-Rebalance日志配置结构化和仪表盘。该仪表盘主要展示DMS重平衡日志的重平衡消费组个数、重平衡次数、消费组重平衡次数、重平衡原因及组详情。 前提条件 已采集DMS日志，详情请参见云防火墙CFW接入LTS。

查看更多 →

配置Kafka/DMS Kafka源端参数 作业中源连接为Kafka连接或DMS Kafka连接时，源端作业参数如表1所示。 表1 Kafka作为源端时的作业参数 参数类型 参数 说明 取值样例 基本参数 Topics 支持单个或多个topic。 est1,est2 数据格式 解析数据时使用的格式：

查看更多 →

DMS分布式消息服务 DMS分布式消息服务支持以下各种消息类型： Kafka版：基于开源社区版Kafka提供的消息队列服务，向用户提供计算、存储和带宽资源独占式的Kafka专享实例。 RabbitMq版：完全兼容开源RabbitMQ，提供即开即用、消息特性丰富、灵活路由、高可用、

查看更多 →

操作步骤 本小节以DMS Kafka到OBS的实时同步为示例，介绍如何配置Migration实时集成作业。配置作业前请务必阅读使用前自检概览， 确认已做好所有准备工作。 参见新建实时集成作业创建一个实时集成作业并进入作业配置界面。 选择数据连接类型：源端选DMS Kafka，目的端选OBS。

查看更多 →

DMS Kafka连接参数说明 连接DMS的Kafka队列时，相关参数如表1所示。 作业运行中禁止修改密码或者更换用户。在作业运行过程中修改密码或者更换用户，密码不会立即生效且作业会运行失败。 表1 DMS Kafka连接参数 参数名 说明 取值样例 名称 连接的名称，根据连接的

查看更多 →