中软国际数据治理专业服务解决方案实践

插入数据 功能简介 HBase是一个面向列的数据库，一行数据，可能对应多个列族，而一个列族又可以对应多个列。 通常，写入数据的时候，我们需要指定要写入的列（含列族名称和列名称）。 HBase通过HTable的put方法来Put数据，可以是一行数据也可以是数据集。 代码样例 public

查看更多 →

写入数据 写入数据接口和HBase原生API一致。 可以参考以下样例代码。 样例代码 public void testPut() { LOG .info("Entering testPut."); try(Table table = conn.getTable(tableName))

查看更多 →

数据导入 总览 批量数据导入 父主题： Doris应用开发指导

查看更多 →

数据建模 多表级联建模 新建维度 新建层次结构 设置SET语句

查看更多 →

数据门户 创建数据门户 分享数据门户 管理数据门户

查看更多 →

处理数据 处理模拟数据步骤如下。 用户进入DISDemo函数详情页，选择“dis-test”测试事件，单击“测试”，测试函数，如图1所示。 图1 配置测试事件 函数执行成功后，部分函数日志如图2所示，全部的日志信息，可以到“日志”页签查询。 图2 函数执行结果 父主题： 使用函数处理DIS数据

查看更多 →

数据接口 接口详情请参考第五章节《接口和样式参考.docx》 1、createSourceAttribute 接口用于存储资产来源属性：资产上架页，订购页都可能用，比如Astro轻应用资产上架页用于存储用户鉴权信息。 2、querySourceAttribute 接口用于用户查询

查看更多 →

数据拆分 “数据拆分”组件将传入该节点的数据按照指定的表达式进行拆分，并将拆分的结果通过节点变量传递给后续节点。通常“数据拆分”组件后续会连接“数据筛选”组件以配合使用。 数据拆分为异步处理组件，如果一个任务中存在“数据拆分”节点，最终开放的API将返回传入“数据拆分”节点时的数据。

查看更多 →

数据写入 写入更新数据时报错 Parquet/Avro schema 写入更新数据时报错UnsupportedOperationException 写入更新数据时报错SchemaCompatabilityException Hudi在upsert时占用了临时文件夹中大量空间 Hudi写入小精度Decimal数据失败

查看更多 →

数据导入 概述 使用Loader导入数据 典型场景：从S FTP服务器 导入数据到HDFS/OBS 典型场景：从SFTP 服务器 导入数据到HBase 典型场景：从SFTP服务器导入数据到Hive 典型场景：从FTP服务器导入数据到HBase 典型场景：从关系型数据库导入数据到HDFS/OBS

查看更多 →

数据看板 操作场景 应用设计态提供了数据看板功能，包含了“数据看板”和“数据详情”两大功能模块。本文指导您如何使用数据看板。 前提条件 已登录应用设计态。 操作步骤 在“首页 > 数据看板”页面，查看如下信息。 图1 数据看板（设计态） 数据看板：统计当前应用下“数据实体”和“关系实体”的当前总量和较昨日增量。

查看更多 →

数据水印 数据水印概述 注入水印 提取水印 父主题： 数据资产保护

查看更多 →

数据清理 自动清理业务数据 手动清理业务数据 清理系统运行日志 查看清理记录 父主题： 系统管理

查看更多 →

一般数据保护：没有通过敏感数据识别分级分类的数据使用一般数据保护。 分级数据保护类型：通过敏感数据识别分级分类的数据可使用分级数据保护，DSC有内置的敏感数据级别L1-L4，去勾选策略基线列表将不展示。 自定义数据保护类型：新增的自定义数据保护类型将显示到策略基线表中。 单击下拉框选择自定义级别

查看更多 →

数据恢复 恢复方案 恢复备份到新实例 恢复备份到当前实例 恢复备份到指定时间点 恢复备份到本地自建数据库 恢复增强版数据

查看更多 →

数据开发 使用 GaussDB (DWS)冷热数据切换功能降低业务成本 使用GaussDB(DWS)分区自动管理功能降低电商和物联网行业数据分区维护成本 使用GaussDB(DWS)视图重建功能实现视图解耦以提升开发效率 HStore表使用优秀实践 GIN索引使用实践 实现数据列的加解密

查看更多 →

数据迁移 使用 CDM 迁移Oracle数据至GaussDB(DWS)集群 使用CDM迁移MySQL数据至GaussDB(DWS)集群 使用 DLI Flink作业实时同步MySQL数据至(GaussDB)DWS集群 使用CDM迁移Hologres至GaussDB(DWS)集群 使用Kettle迁移AWS

查看更多 →

查看数据 使用系统表pg_tables查询数据库所有表的信息。 1 gaussdb=# SELECT * FROM pg_tables; 使用gsql的\d+命令查询表的属性。 1 gaussdb=# \d+ customer_t1; 执行如下命令查询表customer_t1的数据量。

查看更多 →

数据看板 数据实体统计 数据实体属性统计 数据实体实例数据统计 数据源映射统计 父主题： 模型设计

查看更多 →

数据黄页 数据黄页首页 按领域维度统计展示数据资产

查看更多 →

解密数据 功能介绍 功能介绍：解密数据。 接口约束 解密非对称密钥加密的数据时，需要指定密钥ID和加密算法。如果指定的密钥和加密算法与用于加密数据的值不匹配，解密操作将失败。 调用方法 请参见如何调用API。 URI POST /v1.0/{project_id}/kms/decrypt-data

查看更多 →