中软国际数据治理专业服务解决方案实践

动态分区插入场景内存优化 操作场景 SparkSQL在往动态分区表中插入数据时，分区数越多，单个Task生成的HDFS文件越多，则元数据占用的内存也越多。这就导致程序GC（Gabage Collection）严重，甚至发生OOM（Out of Memory）。 经测试证明：102

查看更多 →

如何处理INSERT语句批量插入多条数据时报错 解决方案 建议拆分为多条INSERT语句插入。 父主题： SQL语法类

查看更多 →

SQL无法查询到Parquet类型的Hive表的新插入数据 问题 为什么通过Spark SQL无法查询到存储类型为Parquet的Hive表的新插入数据？主要有以下两种场景存在这个问题： 对于分区表和非分区表，在Hive客户端中执行插入数据的操作后，会出现Spark SQL无法查询到最新插入的数据的问题。 对于分区表，在Spark

查看更多 →

APID=[INTEGER]) 插入AP光模块告警。 告警属性 告警ID 告警级别 告警类型 3276800176 提示 设备告警 告警参数 参数名称 参数含义 OID MIB节点号。 APMAC 插入光模块的AP的MAC地址。 APName 插入光模块的AP的名称。 IfIndex

查看更多 →

AP的名称。 ApIotCardId AP的插卡槽位号。 APID AP的ID。 对系统的影响 银江的插卡插入会导致AP重启，百一的插卡插入对系统没有影响。 可能原因 插入IOT插卡。 处理步骤 无需处理。 参考信息 ALM-3276800208 AP物联网卡拔出 父主题： V200版本LSW设备告警

查看更多 →

设备光口插入模块后不UP 问题描述 设备光口插入光模块并完成对接后端口不能正常UP。 解决方法 以USG6503E-C为例，其GigabitEthernet0/0/16～GigabitEthernet0/0/23为光电互斥接口，两者不能同时工作，默认为电口模式，如果需要使用光口，

查看更多 →

开启不插入Cookie字段的能力 如果您不希望WAF在Cookie中插入HWWAFSESTIME和HWWAFSESID字段，可开启“不插入Cookie字段”开关。但是WAF在Cookie中不插入HWWAFSESTIME和HWWAFSESID字段，将会影响CC人机验证、攻击惩罚、动

查看更多 →

APID=[INTEGER]) 插入AP光模块告警。 告警属性 告警ID 告警级别 告警类型 303046922 提示 设备告警 告警参数 参数名称 参数含义 OID MIB节点号。 APMAC 插入光模块的AP的MAC地址。 APName 插入光模块的AP的名称。 IfIndex

查看更多 →

AP的插卡槽位号。 APID AP的ID。 对系统的影响 银江的插卡插入会导致AP重启，百一的插卡插入对系统没有影响。 可能原因 插入IOT插卡。 处理步骤 无需处理。 参考信息 ALM-303046406 AP物联网卡拔出 父主题： WAC&AP告警

查看更多 →

设备光口插入模块后不UP 问题描述 设备光口插入光模块并完成对接后端口不能正常UP。 解决方法 以USG6503E-C为例，其GigabitEthernet0/0/16～GigabitEthernet0/0/23为光电互斥接口，两者不能同时工作，默认为电口模式，如果需要使用光口，

查看更多 →

Spark动态分区插入场景内存优化 操作场景 SparkSQL在往动态分区表中插入数据时，分区数越多，单个Task生成的HDFS文件越多，则元数据占用的内存也越多。这就导致程序GC（Gabage Collection）严重，甚至发生OOM（Out of Memory）。 经测试证

查看更多 →

col3 from temp_table; 查询test_table表数据，返回结果中列col3的值全为NULL select * from test_table where p1='a' 新添加表分区，并插入数据 alter table test_table add partition(p1='b');

查看更多 →

SQL无法查询到ORC类型的Hive表的新插入数据 问题 为什么通过Spark SQL无法查询到存储类型为ORC的Hive表的新插入数据？主要有以下两种场景存在这个问题： 对于分区表和非分区表，在Hive客户端中执行插入数据的操作后，会出现Spark SQL无法查询到最新插入的数据的问题。 对于分区表，在Spark

查看更多 →

SQL无法查询到Parquet类型的Hive表的新插入数据 问题 为什么通过Spark SQL无法查询到存储类型为Parquet的Hive表的新插入数据？主要有以下两种场景存在这个问题： 对于分区表和非分区表，在Hive客户端中执行插入数据的操作后，会出现Spark SQL无法查询到最新插入的数据的问题。 对于分区表，在Spark

查看更多 →

SQL无法查询到ORC类型的Hive表的新插入数据 问题 为什么通过Spark SQL无法查询到存储类型为ORC的Hive表的新插入数据？主要有以下两种场景存在这个问题： 对于分区表和非分区表，在Hive客户端中执行插入数据的操作后，会出现Spark SQL无法查询到最新插入的数据的问题。 对于分区表，在Spark

查看更多 →

物联网卡插入设备后如何激活？ 请先确认设备是否与SIM卡所支持的网络兼容： 中国移动：仅支持单4G网络。 中国电信：仅支持单4G网络。 中国联通：同时支持3G/4G网络。 三网：仅支持单4G网络。 如果激活失败或无法激活，请联系华为工程师处理。 插入设备激活 物联网卡插入设备通电

查看更多 →

ALM-303046683 AP光模块插入告警 告警解释 ENTITYTRAP/4/OPTICALINSERT:OID [OID] Optical Module has been inserted.(Index=[INTEGER], EntityPhysicalIndex=[INTEGER]

查看更多 →

后台排查sqoop日志，考虑源端数据类型格式问题导致异常。 分析源端数据类型，发现数据类型中有脏数据，源端数据类型有问题。 客户 CDM 界面配置脏数据功能，作业重跑成功，OBS桶排查脏数据类型存在问题，格式不匹配。 父主题： 故障处理类

查看更多 →

APM支持.Net类应用，目前已支持多种主流框架、web 服务器 、通讯协议、数据库等，可实现应用轻松接入。 表1 skywalking探针 .Net组件和框架 探针类型 组件 支持版本 skywalking探针 ASP.NET Core 6.0.4+ skywalking探针 .NET Core

查看更多 →

SQL作业如何指定表的部分字段进行表数据的插入 如果需要将数据插入到表中，但只想指定部分字段，可以使用INSERT INTO语句结合SELECT子句来实现。 但是 DLI 目前不支持直接在INSERT INTO语句中指定部分列字段进行数据插入，您需要确保在SELECT子句中选择的字段

查看更多 →

插入数据报错：null value in column '%s' violates not-null constraint 问题现象 向表中插入数据报错：null value in column '%s' violates not-null constraint，此处s%指报错的列（字段）名。

查看更多 →