元数据任务 创建元数据采集任务 运行元数据采集任务 父主题： 资产管理

查看更多 →

还需要配置“最大备份数”，表示备份目录中可保留的备份文件集数量。 “LocalHDFS”：表示将备份文件保存在当前集群的HDFS目录。选择此参数值，还需要配置以下参数： “目的端路径”：填写备份文件在HDFS中保存的目录。不支持填写HDFS中的隐藏目录，例如快照或回收站目录；也不支持默认的系统目录。

查看更多 →

Step2 在Notebook中调试模型 打开一个新的Terminal终端，进入“/home/ma-user/infer/”目录，运行启动脚本run.sh，并预测模型。基础镜像中默认提供了run.sh作为启动脚本。启动命令如下： sh run.sh 图1 运行启动脚本 上传一张

查看更多 →

周期性的监控。 业务指标监控 监控业务指标 数据质量监控 查看质量作业 步骤8：数据资产查看 在 DataArts Studio 数据目录模块中，您可以查看数据地图。 数据地图 查看业务资产和技术资产 步骤9：服务退订 进行服务退订，避免持续产生费用。 服务退订 服务退订（可选） 父主题：

查看更多 →

设置元数据 概述 设置数据集的元数据信息。 输入 参数 子参数 参数说明 inputs dataframe inputs为字典类型，dataframe为pyspark中的DataFrame类型对象 输出 数据集 参数说明 参数 子参数 参数说明 column_type_map_str

查看更多 →

元数据迁移 新建元数据迁移任务 查询实例下所有迁移任务或查询指定迁移任务信息 删除元数据迁移任务 父主题： API V2（推荐）

查看更多 →

元数据发现过程中，存在同名元数据时的解决策略。 创建并更新元数据 仅创建元数据 默认缺省Owner 元数据发现任务执行后元数据的默认Owner。 如果选择的授权主体名称中带有中划线，此功能可能有失败风险。 文件采样率 （可选）文件采样频率。 采样率为0时，遇到空文件会跳过当前分区表之后的所有分区。该方法减少操作时间，但是准确性会降低。

查看更多 →

已创建了用于存储迁移数据的OBS并行文件系统。 表的Owner只能包含字母、数字和下划线(_)，且长度为1~49个字符。不能包含中划线(-)等其他字符。 如果需要迁移多个 MRS 集群中的元数据到同一个LakeFormation实例，MRS集群之间的Database名称不能重复。 如果需要进行多次迁移，

查看更多 →

在页面右上角单击“返回旧版”，进入旧版DBA智能运维界面。 图2 进入旧版DBA智能运维界面 选择“锁&事务”下的“元数据锁”。 根据需要选择锁状态、数据库名、锁类型、会话ID等进行查询。 在查询结果中查看是否存在持有MDL锁的会话。若存在，单击“kill会话”。 父主题： 锁&事务

查看更多 →

复制元数据 编辑元数据时，会覆盖之前的元数据文件，为避免原始元数据文件丢失，建议您在编辑元数据之前，先复制一份元数据。 操作步骤 在“元数据管理”页面，复制元数据有两个入口： 单击对应元数据文件名称，进入元数据详情页，在页面底端单击“复制”。 在对应的元数据文件的“操作”列，单击“复制”。

查看更多 →

查找元数据 在“元数据管理”页面，您可以在搜索框中输入元数据文件的名称进行查找。 图1 查找元数据 父主题： 元数据操作

查看更多 →

Hive表数据存储在HDFS上，表数据及表数据的元数据由HDFS统一按数据目录进行迁移。而Hive表的元数据根据集群的不同配置，可以存储在不同类型的关系型数据库中（如MySQL、PostgreSQL、Oracle等）。 本指导中导出的Hive表元数据即存储在关系型数据库中的Hive表的描述信息。 业

查看更多 →

DFS或者HBase中抽取数据，然后将数据通过JDBC接口插入到临时表（Staging Table）中。 在MapReduce作业的提交阶段，将数据从临时表迁移到正式表中。 数据导出到文件系统 在MapReduce作业的Map阶段，从HDFS或者HBase中抽取数据，然后将数据写入到文件 服务器 临时目录中。

查看更多 →

创建 数据仓库 GaussDB (DWS) 参见“创建集群”章节创建GaussDB(DWS)数据仓库。创建成功后，记录集群的内网IP。 为确保E CS 与GaussDB(DWS)网络互通，GaussDB(DWS)数据仓库需要与ECS在同一个区域，同一个虚拟私有云和子网下。 表1 DWS规格

查看更多 →

数据仓库错误码 SQL标准错误码说明 第三方库错误码说明 GAUSS-00001 -- GAUSS-00100 GAUSS-00101 -- GAUSS-00200 GAUSS-00201 -- GAUSS-00300 GAUSS-00301 -- GAUSS-00400 GAUSS-00401

查看更多 →

数据仓库服务 DWS DWS集群启用KMS加密 DWS集群启用日志转储 DWS集群启用自动快照 DWS集群启用SSL加密连接 DWS集群未绑定公网IP DWS集群运维时间窗检查 父主题： 系统内置预设策略

查看更多 →

变为“运行中”时，表示Notebook已创建并启动完成。 打开运行中的Notebook实例。 图1 打开Notebook实例 通过功能，上传模型包文件到Notebook中，默认工作目录/home/ma-user/work/。模型包文件需要用户自己准备，样例内容参见模型包文件样例。

查看更多 →

subjectModels JSON 主题模型列表。 Id String 主题模型的标识。 Name String 主题模型的名称。 pdDomain String 产品域。 clsID String 主题类别。 level String 主题分层。 fields JSON 主题模型的字段定义。 attrId

查看更多 →

元数据缓存相关 元数据缓存文件存于何处？如何清理？

查看更多 →

获取桶元数据 开发过程中，您有任何问题可以在github上提交issue，或者在华为云 对象存储服务 论坛中发帖求助。接口参考文档详细介绍了每个接口的参数和使用方法。 您可以通过ObsClient.getBucketMetadata接口获取桶元数据。以下代码展示如何获取桶元数据： //

查看更多 →

"https://your-endpoint"; // 认证用的ak和sk硬编码到代码中或者明文存储都有很大的安全风险，建议在配置文件或者环境变量中密文存放，使用时解密，确保安全；本示例以ak和sk保存在环境变量中为例，运行本示例前请先在本地环境中设置环境变量AccessKeyID和SecretAccessKey。

查看更多 →