中软国际数据治理专业服务解决方案实践

如何处理驱动安装报错“Unable to load the kernel module 'nvidia.ko'” 问题原因 总线脱落。 内核版本不一致。 问题影响 显卡驱动安装失败，显卡无法使用。 处理方法 执行以下命令，查看内核版本，检查内核版本是否一致。 rpm -qa | grep

查看更多 →

如何在不同的namespaces上逻辑地分割数据 问题 如何在不同的namespaces上逻辑地分割数据？ 回答 配置： 要在不同namespaces之间逻辑地分割数据，必须更新HDFS，Hive和Spark的“core-site.xml”文件中的以下配置。 改变Hive组件将改

查看更多 →

at least one partition pruning predicate on partitioned table XX.YYY LOAD数据到OBS外表报错：IllegalArgumentException: Buffer size too small. size SQL作业运行报错： DLI

查看更多 →

加载Impala数据 功能简介 本小节介绍了如何使用Impala SQL向已有的表employees_info中加载数据。从本节中可以掌握如何从集群中加载数据。 样例代码 -- 从本地文件系统/opt/impala_examples_data/目录下将employee_info.

查看更多 →

加载Impala数据 功能简介 本小节介绍了如何使用Impala SQL向已有的表employees_info中加载数据。从本节中可以掌握如何从集群中加载数据。 样例代码 -- 从本地文件系统/opt/impala_examples_data/目录下将employee_info.

查看更多 →

加载Impala数据 功能简介 本小节介绍了如何使用Impala SQL向已有的表employees_info中加载数据。从本节中可以掌握如何从集群中加载数据。 样例代码 -- 从本地文件系统/opt/impala_examples_data/目录下将employee_info.

查看更多 →

权限及对加载数据文件具有owner权限和读写权限。 如果加载数据语句中有关键字LOCAL，表明从本地加载数据，除要求对相应表的UPDATE权限外，还要求该数据在当前连接的HiveServer节点上，加载用户对数据路径“PATH”具有读权限，且以omm用户能够访问该数据文件。 如果

查看更多 →

查看帮助信息。 - user 数据库连接用户（与-U等价）。 字符串 -U 数据库连接用户（与user等价）。 字符串 passwd 用户密码（与-W等价）。 字符串 -W 用户密码（与passwd等价）。 字符串 db 数据库名称（必选，与-d等价）。 字符串 -d 数据库名称（必选与db等价）。

查看更多 →

删除CarbonData表Segments 操作场景 如果用户将错误数据加载到表中，或者数据加载后出现许多错误记录，用户希望修改并重新加载数据时，可删除对应的segment。可使用segment ID来删除segment，也可以使用加载数据的时间来删除segment。 删除segment操作只

查看更多 →

创建GDS外表并导入TPC-H数据 本文介绍如何通过GDS外表导入TPC-H 1000x数据，表1列出了TPC-H测试数据集中的表数据行数。 TPC-DS请跳过本章节。 表数据行数 表1 TPC-H 序号 表名 行数 1 region 5 2 nation 25 3 supplier

查看更多 →

db”数据库的数据导入到“load_db”数据库中。 repl load load_db from '/user/hive/repl'; 通过repl load导入数据库，指定数据库名称时需要注意以下情况： 指定的数据库不存在，在导入的过程中会创建对应的数据库； 指定的数据库已存在，且该数据库的“hive

查看更多 →

'M'：POPULATE_STAT_LOAD_META_DONE加载元数据。 'F'：POPULATE_STAT_LOAD_FINISH加载完成。 'D'：POPULATE_STAT_DROP已删除。 'E'：POPULATE_STAT_ERROR异常。 imcvnattr smallint

查看更多 →

'I'：POPULATE_STAT_INIT初始化。 'L'：POPULATE_STAT_LOAD_START开始加载。 'M'：POPULATE_STAT_LOAD_META_DONE加载元数据。 'F'：POPULATE_STAT_LOAD_FINISH加载完成。 'D'：POPULATE_STAT_DROP已删除。

查看更多 →

. LOAD DATA INPATH '/user/hive_examples_data/employee_info.txt' OVERWRITE INTO TABLE employees_info; 加载数据的实质是将数据拷贝到HDFS上指定表的目录下。 “LOAD DATA

查看更多 →

在源码根目录下，执行下列命令，编译生成TPCH数据工具dbgen。 make -f makefile.suite 使用dbgen执行如下命令，生成TPCH数据100G。 ./dbgen -s 100 登录目标TaurusDB实例，创建目标数据库，并使用如下命令创建TPCH的表。 CREATE

查看更多 →

LOAD写入数据。 LOAD：写入前不做任何处理。 INSERT_OVERWRITE：对数据进行覆盖写入。 LOAD 分区 分区信息，表为分区表的时候，写数据的时候，可以选择需要写入的分区数据。 例如：year=2020,location=sun。 - 高级属性 入库时间字段 将

查看更多 →

---- 用新数据覆盖原有数据 LOAD DATA LOCAL INPATH '/opt/hive_examples_data/employee_info.txt' OVERWRITE INTO TABLE employees_info; ---- 保留原有数据，将新数据追加到表中

查看更多 →

如何在不同的namespaces上逻辑地分割数据 问题 如何在不同的namespaces上逻辑地分割数据？ 回答 配置： 要在不同namespaces之间逻辑地分割数据，必须更新HDFS，Hive和Spark的“core-site.xml”文件中的以下配置。 改变Hive组件将改

查看更多 →

的训练数据到当前训练流程中，扩展当前模型的知识和能力，而不需要从头开始。 增量训练不需要一次性存储所有的训练数据，缓解了存储资源有限的问题；另一方面，增量训练节约了重新训练中需要消耗大量算力、时间以及经济成本。 增量训练特别适用于以下情况： 数据流更新：在实际应用中，数据可能会持

查看更多 →

停机时间较长，从一开始导出就需要停机。 业务中断时间为：数据导出时间+导出文件传输时间+数据导入时间 应用 服务器 与数据库服务器在华为云重新部署，Oracle数据库使用OGG进行迁移 华为云上系统部署成功后，使用OGG配置源端到目的端的数据同步 源端业务停止后，云上数据库完成接管操作。 云上数据库接管业务成功后即可完成业务切换。

查看更多 →

Turbo的AI云存储解决方案，如下图所示。 SFS Turbo HPC型支持和OBS数据联动，您可以通过SFS Turbo HPC型文件系统来加速对OBS对象存储中的数据访问，并将生成的结果数据异步持久化到OBS对象存储中长期低成本保存。 图1 基于OBS+SFS Turbo的存储解决方案

查看更多 →