中软国际数据治理专业服务解决方案实践

CarbonData数据类型概述 简介 CarbonData中的数据存储在table实体中。CarbonData table与RDBMS中的表类似。RDBMS数据存储在由行和列构成的表中。CarbonData table存储的也是结构化的数据，拥有固定列和数据类型。 支持数据类型

查看更多 →

CarbonData数据类型概述 简介 CarbonData中的数据存储在table实体中。CarbonData table与RDBMS中的表类似。RDBMS数据存储在由行和列构成的表中。CarbonData table存储的也是结构化的数据，拥有固定列和数据类型。 支持数据类型

查看更多 →

连接到Spark 在对CarbonData进行任何操作之前，需要先连接到Spark。 创建CarbonData表 连接CarbonData之后，需要创建CarbonData Table，用于加载数据和执行查询操作。 加载数据到CarbonData表 用户从HDFS中的 CS V文件加载数据到所创建的表中。

查看更多 →

Source表上的SELECT查询（支持CarbonData、Hive和Parquet表）。 注意事项 表必须已经存在。 用户应属于数据加载组以执行数据加载操作。默认情况下，数据加载组被命名为“ficommon”。 CarbonData表不支持Overwrite。 源表和目标表的数据类型应该相同，否则源表中的数据将被视为Bad

查看更多 →

Data。 创建CarbonData Table 连接到CarbonData之后，需要创建CarbonData table用于加载数据和执行查询操作。 加载数据到CarbonData Table 创建CarbonData table之后，可以从CSV文件加载数据到所创建的table中。

查看更多 →

Data。 创建CarbonData Table 连接到CarbonData之后，需要创建CarbonData table用于加载数据和执行查询操作。 加载数据到CarbonData Table 创建CarbonData table之后，可以从CSV文件加载数据到所创建的table中。

查看更多 →

CarbonData数据分析 新建CarbonData表 删除CarbonData表 修改CarbonData表 加载CarbonData表数据 删除CarbonData表Segments 合并CarbonData表Segments 父主题： 使用CarbonData

查看更多 →

Source表上的SELECT查询（支持CarbonData、Hive和Parquet表）。 注意事项 表必须已经存在。 用户应属于数据加载组以执行数据加载操作。默认情况下，数据加载组被命名为“ficommon”。 CarbonData表不支持Overwrite。 源表和目标表的数据类型应该相同，否则源表中的数据将被视为Bad

查看更多 →

使用CarbonData CarbonData数据类型概述 CarbonData表用户权限说明 使用Spark客户端创建CarbonData表 CarbonData数据分析 CarbonData性能调优 CarbonData常见配置参数 CarbonData语法参考 CarbonData常见问题

查看更多 →

新建CarbonData表 操作场景 使用CarbonData前需先创建表，才可在其中加载数据和查询数据。可通过Create Table命令来创建表。该命令支持使用自定义列创建表。 使用自定义列创建表 可通过指定各列及其数据类型来创建表。 命令示例： CREATE TABLE IF

查看更多 →

为什么数据查询/加载失败，且发生“org.apache.carbondata.core.memory.MemoryException: Not enough memory”异常？ 问题 为什么数据查询/加载失败，且发生“org.apache.carbondata.core.memory

查看更多 →

为什么数据查询/加载失败，且发生“org.apache.carbondata.core.memory.MemoryException: Not enough memory”异常？ 问题 为什么数据查询/加载失败，且发生“org.apache.carbondata.core.memory

查看更多 →

新建CarbonData Table 操作场景 使用CarbonData前需先创建表，才可在其中加载数据和查询数据。可通过Create Table命令来创建表。该命令支持使用自定义列创建表。 使用自定义列创建表 可通过指定各列及其数据类型来创建表。 命令示例： CREATE TABLE

查看更多 →

从OBS导入ORC、CARBONDATA数据 OBS上的数据准备 创建外部 服务器 创建外表 通过外表查询OBS上的数据 清除资源 支持的数据类型 父主题： 从OBS并行导入数据

查看更多 →

数据加载支持哪些数据源？ 数据加载支持不同存储之间的数据迁移，源端支持OBS（数据湖OBS和租户OBS）、HIVE或DWS存储。目标端支持OBS（数据湖OBS）、HIVE、DWS或HDFS存储。同时支持本地上传数据至OBS（数据湖OBS）。 父主题： 数据加载

查看更多 →

如何避免对历史数据进行minor compaction？ 问题 如何避免对历史数据进行minor compaction？ 回答 如果要先加载历史数据，后加载增量数据，则以下步骤可避免对历史数据进行minor compaction： 加载所有历史数据。 将major compact

查看更多 →

index_name 索引表的名称。表名称应由字母数字字符和下划线（_）特殊字符组成。 db_name 数据库的名称。数据库名称应由字母数字字符和下划线（_）特殊字符组成。 table_name 数据库中的表名称。表名称应由字母数字字符和下划线（_）特殊字符组成。 col_name 表中的列

查看更多 →

加载数据到Hive表中 功能介绍 本小节介绍了如何使用HQL向已有的表employees_info中加载数据。从本节中可以掌握如何从本地文件系统、 MRS 集群中加载数据。以关键字LOCAL区分数据源是否来自本地。 样例代码 -- 从本地文件系统/opt/hive_examples_

查看更多 →

加载评论 功能介绍 根据数据集ID查询匹配的数据集评论。 URI URI格式 GET /softcomai/datalake/v1.0/datasets/comment 参数说明 无。 请求 请求样例 GET https://ipaddr:port/dataset/softcomai/datalake/v1

查看更多 →

加载驱动 在创建数据库连接之前，需要先加载数据库驱动程序。 加载驱动有两种方法： 在代码中创建连接之前任意位置隐含装载：Class.forName("com.huawei.gaussdb.jdbc.Driver") 在JVM启动时参数传递：java -Djdbc.drivers=com

查看更多 →

“页面性能分析”展示访问某个页面性能数据分析。 图2 页面性能分析 单击“URL”列的某一条URL链接，展示该URL加载性能的指标数据值。 图3 加载性能URL 表1 加载性能相关参数说明 参数名称 说明 页面URL 页面链接。 加载次数 页面加载次数。 平均加载时间 页面平均加载时间。 首屏时间

查看更多 →