中软国际数据治理专业服务解决方案实践

中软国际数据治理专业服务解决方案实践

    对大数据的认识 更多内容
  • 我创建的微调数据集会被其他用户调用去训练他们的大模型吗?

    我创建微调数据集会被其他用户调用去训练他们模型吗? 用户个人创建数据集是属于个人账号下专属数据,未经本人许可不会被其他人员查看到,且不会被其他用户在模型训练时调用。 父主题: AI原生应用引擎

    来自:帮助中心

    查看更多 →

  • 分区表对导入操作的性能影响

    基于key-partOid哈希表实现 分区路由主要处理逻辑根据导入数据元组分区键计算其所在分区过程,相比非分区表这部分为额外增加开销,这部分开销在最终数据导入上具体性能损失和 服务器 CPU处理能力、表宽度、磁盘/内存实际容量相关,通常可以粗略认为: x86服务器场景下分区表相比普通表导入性能会略低10%以内。

    来自:帮助中心

    查看更多 →

  • 分区表对导入操作的性能影响

    哈希+哈希 分区路由主要处理逻辑根据导入数据元组分区键计算其所在分区过程,相比非分区表这部分为额外增加开销,这部分开销在最终数据导入上具体性能损失和服务器CPU处理能力、表宽度、磁盘/内存实际容量相关,通常可以粗略认为: x86服务器场景下一级分区表相比普通表导入性能会略低

    来自:帮助中心

    查看更多 →

  • 对所有账号授予桶的公共读权限

    所有账号授予桶公共读权限 场景介绍 当某个桶需要授权所有账号访问权限时,可以通过桶策略和桶ACL配置授予所有账号访问桶权限。本示例以桶策略为例。 配置须知 本案例预置“公共读”模板允许所有账号(所有互联网用户)整个桶及桶内所有对象执行以下权限: HeadBucket:判断桶是否存在、获取桶元数据

    来自:帮助中心

    查看更多 →

  • 了解代码目录结构

    {widget}.css:组件样式文件,在该文件中编写组件 CSS 样式。 {widget}.editor.js:组件核心渲染文件。组件属性定义文件,负责组件编辑状态时需要渲染界面和逻辑。 {widget}.flt:组件DOM结构文件,需要在服务端提前渲染部分可以写在此文件中,相当于HTML文件,负责样式展示。

    来自:帮助中心

    查看更多 →

  • 如何避免对历史数据进行minor compaction?

    如何避免历史数据进行minor compaction? 问题 如何避免历史数据进行minor compaction? 回答 如果要先加载历史数据,后加载增量数据,则以下步骤可避免历史数据进行minor compaction: 加载所有历史数据。 将major compact

    来自:帮助中心

    查看更多 →

  • 如何对Hive表大小数据进行监控

    如何Hive表大小数据进行监控 问题 如何Hive中表大小数据进行监控? 回答 当用户要对Hive表大小数据进行监控时,可以通过HDFS精细化监控指定表目录进行监控,从而到达监控指定表大小数据目的。 前提条件 Hive、HDFS组件功能正常 HDFS精细化监控功能正常

    来自:帮助中心

    查看更多 →

  • 如何对Hive表大小数据进行监控

    如何Hive表大小数据进行监控 问题 如何Hive中表大小数据进行监控? 回答 当用户要对Hive表大小数据进行监控时,可以通过HDFS精细化监控指定表目录进行监控,从而到达监控指定表大小数据目的。 前提条件 Hive、HDFS组件功能正常 HDFS精细化监控功能正常

    来自:帮助中心

    查看更多 →

  • 对其他账号授予桶的指定操作权限

    其他账号授予桶指定操作权限 场景介绍 本案例介绍如何为其他华为云账号授予OBS桶指定操作权限。这里账号指华为云账号本身,不包含账号下IAM用户,如果要为IAM用户授权,请参见对其他账号下IAM用户授予桶和桶内资源访问权限。 此处以授予设置桶ACL和获取桶ACL权限

    来自:帮助中心

    查看更多 →

  • 多对一的场景约束及操作建议

    场景约束及操作建议 因业务需要,不同实例、不同表数据需要进行合并时,数据复制服务提供数据迁移和实时同步均支持多场景。 多一场景分为实例级多一和库表级多一。其中实例级多一可创建多个同步任务实现;库表级多一仅实时同步支持,通过实时同步对象名映射功能,实现库级或者表级数据多对一同步。

    来自:帮助中心

    查看更多 →

  • 对所有账号授予指定对象的读权限

    所有账号授予指定对象读权限 场景介绍 某公司A使用OBS存储了大量全球各地地图数据,这些数据需要对外开放供所有人查阅。在这种情况下,该公司便可以为这部分数据设置所有账号读取权限,然后将这些数据对应URL公开在互联网上,所有人就可以使用这个URL访问或下载这些公开数据了。

    来自:帮助中心

    查看更多 →

  • 分区表对导入操作的性能影响

    基于key-partOid哈希表实现 分区路由主要处理逻辑根据导入数据元组分区键计算其所在分区过程,相比非分区表这部分为额外增加开销,这部分开销在最终数据导入上具体性能损失和服务器CPU处理能力、表宽度、磁盘/内存实际容量相关,通常可以粗略认为: x86服务器场景下分区表相比普通表导入性能会略低10%以内。

    来自:帮助中心

    查看更多 →

  • 分区表对导入操作的性能影响

    哈希+哈希 分区路由主要处理逻辑根据导入数据元组分区键计算其所在分区过程,相比非分区表这部分为额外增加开销,这部分开销在最终数据导入上具体性能损失和服务器CPU处理能力、表宽度、磁盘/内存实际容量相关,通常可以粗略认为: x86服务器场景下一级分区表相比普通表导入性能会略低

    来自:帮助中心

    查看更多 →

  • mysqldump的6大使用场景的导出命令

    mysqldump6使用场景导出命令 背景描述 mysqldump是MySQL最常用逻辑导入导出工具,下面介绍几种常见使用场景。 mysqldump选项解析 表1 配置项说明 选项名称 说明 add-drop-table 每个数据表创建之前添加drop数据表语句。 events,E

    来自:帮助中心

    查看更多 →

  • 对所有账号授予指定目录的读权限

    所有账号授予指定目录读权限 场景介绍 当一个文件夹下对象都需要授权所有账号访问权限时,可以通过桶策略配置授予所有账号访问文件夹内对象权限。 配置须知 本案例预置“目录只读”模板允许所有账号(所有互联网用户)指定目录执行以下权限: GetObject:获取对象内容、获取对象元数据

    来自:帮助中心

    查看更多 →

  • 数据复制服务对源数据库有什么要求

    数据复制服务数据库有什么要求 不同链路,数据库和权限要求也不同,可参考以下链接,选择对应链路查看使用须知: 支持数据库版本 实时迁移方案概览 备份迁移方案概览 实时同步方案概览 数据订阅使用须知 实时灾备方案概览 父主题: 产品咨询

    来自:帮助中心

    查看更多 →

  • 数据复制服务对目标数据库有什么要求

    数据复制服务目标数据库有什么要求 在创建任务时,用户填写连接目标数据用户,需具备一定权限。不同链路具体权限可参考使用须知中权限要求。 实时迁移请参考实时迁移方案概览 备份迁移请参考备份迁移方案概览 实时同步请参考实时同步方案概览 数据订阅强参考数据订阅使用须知 实时灾备请参考实时灾备方案概览

    来自:帮助中心

    查看更多 →

  • 如何对DSC的操作记录进行审计?

    如何DSC操作记录进行审计? DSC所有操作都会通过API形式记录在 云审计 服务(Cloud Trace Service, CTS )中。 开通云审计服务后,您可以在云审计服务中查看有关DSC所有操作记录,供安全审查使用。关于如何查看审计日志,请参见查看DSC云审计日志。 父主题:

    来自:帮助中心

    查看更多 →

  • 对其他账号授予指定对象的读权限

    其他账号授予指定对象读权限 场景介绍 本案例介绍如何为其他账号授予OBS桶中某个对象或某类对象读权限。这里账号指华为云账号本身,不包含账号下IAM用户,如果要为IAM用户授权,请参见对其他账号下IAM用户授予桶和桶内资源访问权限。 推荐配置方法 其他账号授权,推荐使用桶策略。

    来自:帮助中心

    查看更多 →

  • DRS对源数据库和目标数据库有什么影响

    DRS数据库和目标数据库有什么影响 DRS数据压力及影响 全量(初始化)阶段,DRS需要从源库将所有存量数据查询一次。DRS查询使用简单SQL语句,源库影响主要体现在IO上,查询速度也受限于源数据库IO相关性能以及网络带宽。一般在网络无瓶颈情况下,会对源数据库增加

    来自:帮助中心

    查看更多 →

  • 我对存储在OBS上的数据加密时,可支持哪些加密技术?

    存储在OBS上数据加密时,可支持哪些加密技术? 您在将数据上传到OBS中前,可以事先对数据进行加密,以保证传输和保存安全性。OBS不限定客户端加密技术。 用户可根据需要对对象进行服务端加密,使对象更安全存储在OBS中。 需要上传对象可以通过数据加密服务器提供密钥

    来自:帮助中心

    查看更多 →

共105条
看了本文的人还看了