中软国际数据治理专业服务解决方案实践

加解密大量数据 场景说明 当有大量数据（例如：照片、视频或者数据库文件等）需要加解密时，用户可采用信封加密方式加解密数据，无需通过网络传输大量数据即可完成数据加解密。 加密和解密原理 大量数据加密 图1 加密本地文件 说明如下： 用户需要在KMS中创建一个用户主密钥。 用户调用K

查看更多 →

示例2：加解密大量数据 场景描述 在大量数据加解密的场景，您的程序会经常使用到对数据密钥的加解密。 大量数据加密的流程如下： 在KMS中创建一个用户主密钥。 调用KMS的“create-datakey”接口创建数据加密密钥。用户得到一个明文的数据加密密钥和一个密文的数据加密密钥。其

查看更多 →

ntpdate修改时间导致HDFS出现大量丢块 问题背景与现象 用ntpdate修改了集群时间，修改时未停止集群，修改后HDFS进入安全模式，无法启动。 退出安全模式后启动，hfck检查丢了大概1 TB数据。 原因分析 查看NameNode原生页面发现有大量的块丢失。 图1 块丢失

查看更多 →

大量数据文件，训练过程中读取数据效率低？ 当数据集存在较多数据文件（即海量小文件），数据存储在OBS中，训练过程需反复从OBS中读取文件，导致训练过程一直在等待文件读取，效率低。 解决方法 建议将海量小文件，在本地压缩打包。例如打包成.zip格式。 将此压缩后的文件上传至OBS。

查看更多 →

String 源实例节点ID。 database 是 String 数据库名。 value 是 String 配置值。仅支持修改同步范围，不支持修改白名单或黑名单类型。 例如：创建了白名单数据同步，调用本接口修改时， 支持 "value"："{"white_list":"test1

查看更多 →

修改数据标准 功能介绍 修改数据标准。 调用方法 请参见如何调用API。 URI PUT /v2/{project_id}/design/standards/{id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID，获取方法请参见项目ID和账号ID。

查看更多 →

String 源实例节点ID。 database 是 String 数据库名。 value 是 String 配置值。仅支持修改同步范围，不支持修改白名单或黑名单类型。 例如：创建了白名单数据同步，调用本接口修改时， 支持 "value"："{"white_list":"test1

查看更多 →

创建/修改数据 点击servicelayer连接器名称进入连接器详情页面，选"执行动作"，创建执行动作，封装创建/修改数据的执行动作 执行动作基本信息 根据请求参数配置输入，添加请求头参数、查询参数、路径参数 请求头参数： 查询参数： 路径参数： 响应体配置为空 保存 父主题： 封装泛微OA执行动作

查看更多 →

Loader作业导入大量数据至HDFS时报错 问题 大量数据写入HDFS时偶现“NotReplicatedYet Exception: Not replicated yet”错误。 图1 报错信息 回答 以下原因可能造成该报错： HDFS客户端向NameNode发送新Block申

查看更多 →

修改数据集 功能介绍 管理员对已发布的数据集提交修改申请。 URI URI格式 PUT /softcomai/datalake/v1.0/datasets 参数说明 无。 请求 请求样例 PUT https://aissowulanalpha.inhuawei.com/datas

查看更多 →

修改数据保存时间 点击存储组上的编辑按钮，可以调整存储组下的所有存储中的数据保存时间。如下图： 随着时间流逝，当存储中的数据时间超出了保存时间，超出保存时间范围内的数据将会被自动清除。 父主题： 存储组

查看更多 →

修改数据集 功能介绍 管理员对已发布的数据集提交修改申请。 URI URI格式 PUT /softcomai/datalake/v1.0/datasets 参数说明 无。 请求 请求样例 PUT https://aissowulanalpha.inhuawei.com/datas

查看更多 →

CLICKHOUSE数据源 FTP：FTP数据源 OBS：OBS数据源 ACTIVEMQ：ActiveMQ数据源 ARTEMISMQ：ArtemisMQ数据源 IBMMQ：IBM MQ数据源 KAFKA：Kafka数据源 MQS：MQS数据源 RABBITMQ：RabbitMQ数据源 HANA：HANA数据源

查看更多 →

停止修改数据同步 功能介绍 停止修改数据同步。 调用方法 请参见如何调用API。 URI DELETE /v3/{project_id}/instances/{instance_id}/clickhouse/databases/replication/config 表1 路径参数

查看更多 →

修改数据同步方式 操作场景 云数据库RDS服务支持切换主备实例的数据同步方式，以满足不同业务需求。可选择 “异步”或者“半同步”两种方式。 异步： 应用更新数据时，主库执行完操作后立即向应用返回响应，通常具有较高的性能。 半同步（默认选择）： 应用更新数据时，主库需要等待备库收到日志才向应用返回响应，对性能有影响。

查看更多 →

参数类型 描述 name 是 String 数据源名称 最大长度：128 type 是 String 数据源类型, 包括：IOTDA、API、DIS。数据源不支持修改类型。 content 否 ContentDetailReq object 数据源详细配置内容 表4 ContentDetailReq

查看更多 →

数据库参数修改 如何修改TaurusDB标准版实例的时区 TaurusDB标准版密码过期策略 如何修改TaurusDB标准版的事务隔离等级 如何确保TaurusDB标准版数据库字符集正确 使用utf8mb4字符集存储emoji表情到TaurusDB标准版实例 是否支持使用SQL命

查看更多 →

数据库参数修改 如何修改TaurusDB标准版实例的时区 TaurusDB标准版密码过期策略 如何修改TaurusDB标准版的事务隔离等级 如何确保TaurusDB标准版数据库字符集正确 使用utf8mb4字符集存储emoji表情到TaurusDB标准版实例 是否支持使用SQL命

查看更多 →

单击页面左上角的，选择“数据库 > 云数据库 RDS”。 在“实例管理”页面，选择指定的主备实例，单击主实例名称。 在“基本信息”页面，在“数据库信息”模块的“数据同步方式”处，单击“修改”，在弹出框中，选择“数据同步方式”，单击“确定”，完成修改。 图1 切换数据同步方式 在实例的“基本信息”页面，查看修改结果。

查看更多 →

修改数据源 操作场景 您可根据需要更新数据源信息。本文指导您如何修改数据源。 前提条件 已获取开发人员及以上权限用户的账号和密码。 操作步骤 登录LinkX-F系统首页。 选择“基础数据管理 > 数据源”，进入“数据源”页面。 您可参照以下任一方式进入编辑状态： 并非所有字段都支持修改，请以实际为准。

查看更多 →