中软国际数据治理专业服务解决方案实践

子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。 父主题： 大容量数据库

查看更多 →

Storm是一个分布式的、可靠的、容错的数据流处理系统。它会把工作任务委托给不同类型的组件，每个组件负责处理一项简单特定的任务。Storm的目标是提供对大数据流的实时处理，可以可靠地处理无限的数据流。 Storm有很多适用的场景：实时分析、在线机器学习、持续计算和分布式ETL等，易扩展、支持容错，可确保数据得到处理，易于构建和操控。

查看更多 →

获取大屏指定组件数据 功能介绍 获取大屏指定组件数据。 URI POST /v1/{project_id}/screens/{screen_id}/query-data 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID。获取方法请参考获取项目ID。

查看更多 →

子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。 父主题： 大容量数据库

查看更多 →

odbctest -lodbc 此示例完整演示如何通过ODBC获取和处理 GaussDB 中的数据。 前提条件：数据源已配置成功。Linux系统请参考Linux下配置数据源；Windows系统请参考Linux下配置数据源。 1 2 3 4 5 6 7 8

查看更多 →

使用数据工程准备与处理数据集 数据工程介绍 数据工程使用流程 数据集格式要求 导入数据至盘古平台 加工数据集 标注数据集 评估数据集 发布数据集 数据工程常见报错与解决方案

查看更多 →

odbctest -lodbc 此示例完整演示如何通过ODBC获取和处理GaussDB中的数据。 前提条件：数据源已配置成功。Linux系统请参考Linux下配置数据源；Windows系统请参考Windows下配置数据源。 1 2 3 4 5 6 7 8

查看更多 →

odbctest -lodbc 此示例完整演示如何通过ODBC获取和处理GaussDB中的数据。 前提条件：数据源已配置成功。Linux系统请参考Linux下配置数据源；Windows系统请参考Windows下配置数据源。 1 2 3 4 5 6 7 8

查看更多 →

方法二：大粒度分区（推荐），如果使用分区表则需要根据数据增长情况来计算，例如使用年分区，这种方式相对麻烦些但是多年后表无需重新导入。 方法三：数据老化，按照业务逻辑分析大的维度表是否可以通过数据老化清理无效的维度数据从而降低数据规模。 数据量非常小的事实表 这种可以在预估很长一段时间的数据增长量的前提下使用非分

查看更多 →

子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。 父主题： 大容量数据库

查看更多 →

子问题的解的合并。对于大容量数据场景，数据库提供对数据进行“分治处理”的方式即分区，将逻辑数据库或其组成元素划分为不同的独立部分，每一个分区维护逻辑上存在相类似属性的数据，这样就把庞大的数据整体进行了切分，有利于数据的管理、查找和维护。 父主题： 大容量数据库

查看更多 →

心环节；产销协同精细化，利用实时数据准确把握供产销节奏。 研发数字化：最新热卖商品分析，洞察消费趋势；市场竞争情况分析，定位产品竞争力；数据驱动产品研发决策，提高新品的上市成功率。 方案价值 思维渗透：大屏、PC、移动应用等工具渗各个平台营造数据分析氛围； 生态搭建：完整产业链深

查看更多 →

使用数据工程构建NLP大模型数据集 NLP大模型支持接入的数据集类型 盘古NLP大模型仅支持接入文本类数据集，该数据集格式要求请参见文本类数据集格式要求。 构建NLP大模型所需数据量 使用数据工程构建盘古NLP大模型数据集进行模型训练时，所需数据量见表1。 表1 构建NLP大模型所需数据量

查看更多 →

络特征。 高质量标注数据多：通过专业标注工具和专家经验，积累海量标注样本，累计已有1亿条电信标注样本数据。 电信数据治理高效，数据处理效率提升2倍以上 数据属性易理解：集成50000多种属性的数据字典，降低用户使用电信数据门槛。 数据治理效率高：设备采集数据接口标准化，支持多种主流文件的导入和ETL处理。

查看更多 →

如图6所示，选择开发场景为“大屏”，单击右侧区域的“开发”，进入到配置的AppCube大屏开发环境。 图6 进入大屏开发环境 如果使用系统默认提供开发环境，进入到默认环境的业务大屏。 如果使用配置的开发环境，进入到配置的开发地址，配置的地址不是直接进入业务大屏，参见下图进入业务大屏。 如图7所示，单击“导入项目包”。

查看更多 →

数据上报失败如何处理？ 若设备是使用接口注册的，请确认设备是否因为没在指定的timeout时间内上线而被物联网平台自动删除了。如果设备已被删除，请重新注册设备再尝试上报数据。 请检查使用接口注册设备时，填写的产品信息是否和产品模型一致。 请检查上报的数据名称是否和产品模型定义的服务属性一致。

查看更多 →

无法正常上报数据怎么办？进行排查。 确定以上都不存在问题时，请检查设备和物联网平台之间的网络链路是否畅通，设备是否正常运行。 如果确认设备上报数据成功，但在设备管理服务的历史数据中无法查看到设备上报的数据，请请确保创建应用时已打开“存储历史数据”开关。 父主题： 数据上报（联通用户专用）

查看更多 →

数据查询请求处理过程 图1 GaussDB服务响应流程 父主题： 数据库系统概述

查看更多 →

处理非初级SQL数据类型 本节介绍如何处理ecpg应用中非标量以及用户定义的SQL级别的数据类型。注意此处和使用非初级类型的宿主变量章节中介绍的对于非初级类型的宿主变量的处理不同。 数组 ecpg不直接支持多维SQL级别数组。一维SQL数组可以被映射到C语言数组类型的宿主变量，反

查看更多 →

数据查询请求处理过程 图1 GaussDB服务响应流程 父主题： 数据库系统概述

查看更多 →

Redis监控数据异常处理方法 当对Redis监控数据存在疑问或异议时，可以使用Redis-cli访问Redis实例，执行info all命令，查看进程记录的指标。info all输出详解可参考：https://redis.io/docs/latest/commands/info/。

查看更多 →