上传代码到Gitlab代码仓库 本实践使用的是Java项目代码，使用Maven构建Jar包。 前提条件 Jenkins所在Linux虚拟机能够访问GitLab代码仓库。 已经在GitLab创建账号和仓库。 操作步骤 登录GitLab。 上传代码到已创建好的代码仓库。 父主题： 操作前准备

查看更多 →

上传代码到Gitlab代码仓库 本实践使用的是Java项目代码，使用Maven构建Jar包。 前提条件 Jenkins所在Linux虚拟机能够访问GitLab代码仓库。 已经在GitLab创建账号和仓库。 操作步骤 登录GitLab。 上传代码到已创建好的代码仓库。 父主题： 环境准备

查看更多 →

spark.sql.collect.Hive 该参数在spark.sql.uselocalFileCollect开启的情况下生效。直接序列化的方式，还是间接序列化的方式保存结果数据到磁盘。 优点：针对分区数特别多的表查询结果汇聚性能优于直接使用结果数据保证在磁盘的方式。 缺点：和spark

查看更多 →

登录安装了Jekins的Linux虚拟机环境安装obsutil工具，请参考下载和安装obsutil。 安装obsutil工具前需要在Jenkins所在Linux虚拟机中执行如下命令查看虚拟机操作系统类型： echo $HOSTTYPE 若执行如上命令的输出值是“x86_64”，请下载AMD

查看更多 →

手动构建验证 在浏览器地址栏输入http://{安装Jekins的Linux虚拟机IP}:8080，登录Jenkins。 单击“我的视图”。 选择对应的构建任务，单击构建任务名称进入详情界面。 单击“立即构建”，生成构建任务。 在“构建历史”以及“阶段视图”中会有对应的构建任务信

查看更多 →

serializers.KafkaAvroSerializer 序列化的记录，以及可以写入成能被 io.confluent.kafka.serializers.KafkaAvroDeserializer 反序列化的记录。 当以这种格式读取（反序列化）记录时，将根据记录中编码的 schema 版本

查看更多 →

部署“执行PowerShell命令”步骤超时 问题现象 部署PowerShell命令：“java -jar jenkins.war --httpPort=8088”时，日志将卡在部署中，直到超时（使用PowerShell命令启动服务时均会遇到该问题）。 原因分析 PowerShe

查看更多 →

手工部署RabbitMQ（CentOS 7.4） PostgreSQL本地Slave搭建步骤 手工安装宝塔面板（CentOS 7.2） 基于 弹性云服务器 安装及部署Jenkins 如何使用auditd记录Linux系统文件改动 通过Extundelete恢复弹性 云服务器 误删除数据（Linux） 搭建ThinkPHP框架

查看更多 →

手动构建验证 在浏览器地址栏输入http://{安装Jekins的Linux虚拟机IP}:8080，登录Jenkins。 左侧导航栏单击“我的视图”。 选择对应的构建任务，单击构建任务名称进入详情界面，示例为“test-demo”。 单击右侧，在左侧构建执行状态中会生成一个构建任务，单击任务编号，选择“Console

查看更多 →

逻辑处理后，将评测结果写成评测pb。 其中仿真pb是通过八爪鱼提供的sim_osi.proto进行序列化和反序列化，评测pb是通过八爪鱼提供的eva.proto进行序列化和反序列化的。 自定义评测算法的实现有如下几个步骤： 在代码内通过SIM_OSI_PATH环境变量获取仿真pb

查看更多 →

serializers.KafkaAvroSerializer序列化的记录，以及可以写入成能被 io.confluent.kafka.serializers.KafkaAvroDeserializer反序列化的记录。 当以这种格式读取（反序列化）记录时，将根据记录中编码的 schema 版本 id

查看更多 →

serializers.KafkaAvroSerializer序列化的记录，以及可以写入成能被 io.confluent.kafka.serializers.KafkaAvroDeserializer反序列化的记录。 当以这种格式读取（反序列化）记录时，将根据记录中编码的 schema 版本 id

查看更多 →

Spark Core调优 数据序列化 配置内存 设置并行度 使用广播变量 使用External Shuffle Service提升性能 Yarn模式下动态资源调度 配置进程参数 设计DAG 经验总结 父主题： Spark应用调优

查看更多 →

Spark Core性能调优 Spark Core数据序列化 Spark Core内存调优 Spark Core内存调优 配置Spark Core广播变量 配置Spark Executor堆内存参数 配置Yarn模式下Spark动态资源调度 调整Spark Core进程参数 Spark

查看更多 →

DLI 云服务通过华为 云安全 公告密切跟踪漏洞，如Apache Log4j2 远程代码执行漏洞（CVE-2021-44228）、Fastjson存在反序列化漏洞（CNVD-2022-40233）等，如发现服务模块涉及漏洞影响，会迅速通过官方解决方案升级现网更新漏洞。 更新配置 DLI云服务通过版本更新升级更新配置。

查看更多 →

P4HyperLogLog)。在当前数据引擎的实现中，hll的数据草图是通过一组32位的桶来存储对应的最大hash。 序列化 数据草图可以通过varbinary进行序列化和反序列化。这使得可以被方便地存储，以备后用。通过合并多个草图，可以在查询分区中所有元素的approx_distinct

查看更多 →

Openoffice（转码服务）（后台） Minio（分布式文件存储） 2核4G Gitlab(14+以上)（实训使用） 4核8G以上 jenkins（实训使用） sonar（实训使用） 4核8G 4台 +k8s K8s（实训,实验使用） 操作系统设置 Centos7 修改主机名（永久）

查看更多 →

木马进行检测。 深度检测 防护同形字符混淆、通配符变形的命令注入、UTF7、Data URI Scheme等深度反逃逸。 说明： 开启“深度检测”后，WAF将对深度反逃逸进行检测防护。 header全检测 默认关闭。关闭状态下WAF会检测常规存在注入点的header字段，包含Us

查看更多 →

Spark Core性能调优 Spark Core数据序列化 Spark Core内存调优 设置Spark Core并行度 配置Spark Core广播变量 配置Spark Executor堆内存参数 使用External Shuffle Service提升Spark Core性能

查看更多 →

快照捕获时间。 snpxmin bigint 快照xmin。 snpcsn bigint 快照csn。 snpsnapshot text 快照序列化文本。 父主题： 其他系统表

查看更多 →

快照捕获时间 snpxmin bigint 快照xmin snpcsn bigint 快照csn snpsnapshot text 快照序列化文本 父主题： 系统表

查看更多 →