MEMORY_NODE_NG_DETAIL nodegroup内存使用情况。 表1 MEMORY_NODE_NG_DETAIL字段 名称 类型 描述 ngname text node group名称。 memorytype text 内存使用的名称： ng_total_memory：node

查看更多 →

Memory MEMORY_NODE_DETAIL GLOBAL_MEMORY_NODE_DETAIL MEMORY_NODE_NG_DETAIL SHARED_MEMORY_DETAIL GLOBAL_SHARED_MEMORY_DETAIL TRACK_MEMORY_CONTEXT_DETAIL

查看更多 →

Memory MEMORY_NODE_DETAIL GLOBAL_MEMORY_NODE_DETAIL MEMORY_NODE_NG_DETAIL SHARED_MEMORY_DETAIL GLOBAL_SHARED_MEMORY_DETAIL TRACK_MEMORY_CONTEXT_DETAIL

查看更多 →

监控节点进程的GC情况（在客户端的conf/spark-default.conf配置文件中，在spark.driver.extraJavaOptions和spark.executor.extraJavaOptions配置项中添加参数："-verbose:gc -XX:+PrintGCDetails -XX:+PrintGCTimeStamps"

查看更多 →

Memory GLOBAL_MEMORY_NODE_DETAIL GLOBAL_SHARED_MEMORY_DETAIL MEMORY_NODE_DETAIL SHARED_MEMORY_DETAIL 父主题： DBE_PERF Schema

查看更多 →

Memory MEMORY_NODE_DETAIL GLOBAL_MEMORY_NODE_DETAIL MEMORY_NODE_NG_DETAIL SHARED_MEMORY_DETAIL GLOBAL_SHARED_MEMORY_DETAIL TRACK_MEMORY_CONTEXT_DETAIL

查看更多 →

配置流式读取Spark Driver执行结果 配置场景 在执行查询语句时，返回结果有可能会很大（10万数量以上），此时很容易导致JD BCS erver OOM（Out of Memory）。因此，提供数据汇聚功能特性，在基本不牺牲性能的情况下尽力避免OOM。 配置描述 提供两种不同

查看更多 →

默认值 描述 spark.driver.memory 4G 指定用于driver端进程的内存，其中SparkContext已初始化。 说明： 在客户端模式下，不要使用SparkConf在应用程序中设置该参数，因为驱动程序JVM已经启动。要配置该参数，请在--driver-memory命令行选项或默认属性文件中进行配置。

查看更多 →

）执行如下命令： spark-submit --master yarn --jars /opt/hudi-java-examples-1.0.jar // 指定spark运行时需要的hudi jars路径 --driver-memory 1g --executor-memory 1g --executor-cores

查看更多 →

在 FusionInsight Manager首页，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”，选择“JDB CS erver2x > 默认”，“SPARK_DRIVER_MEMORY”参数默认值为4G。若参数值调整后，仍偶现告警，可按0.5倍速率调大。若告警

查看更多 →

在FusionInsight Manager首页，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”，选择“IndexServer2x > 性能”，“SPARK_DRIVER_MEMORY”参数的默认值为4G，可根据如下原则进行调整：若偶现告警，可以按0.5倍速

查看更多 →

监控节点进程的GC情况（在客户端的conf/spark-default.conf配置文件中，在spark.driver.extraJavaOptions和spark.executor.extraJavaOptions配置项中添加参数："-verbose:gc -XX:+PrintGCDetails -XX:+PrintGCTimeStamps"

查看更多 →

默认值 描述 spark.driver.memory 4G 指定用于driver端进程的内存，其中SparkContext已初始化。 说明： 在客户端模式下，不要使用SparkConf在应用程序中设置该参数，因为驱动程序JVM已经启动。要配置该参数，请在--driver-memory命令行选项或默认属性文件中进行配置。

查看更多 →

化。 操作步骤 优化GC，调整老年代和新生代的大小和比例。在客户端的conf/spark-defaults.conf配置文件中，在spark.driver.extraJavaOptions和spark.executor.extraJavaOptions配置项中添加参数：-XX:NewRatio。如，"

查看更多 →

5倍速率调大。若频繁出现告警，可以按1倍速率调大。建议不要超过“SPARK_DRIVER_MEMORY”的参数值。多业务量、高并发的情况可以考虑增加实例。 在FusionInsight Manager首页，选择“运维 > 告警 > 阈值设置 > Spark2x > 内存 > JDBCServer2x直接内存使用率统计

查看更多 →

Memory GS_SHARED_MEMORY_DETAIL GLOBAL_MEMORY_NODE_DETAIL GLOBAL_SHARED_MEMORY_DETAIL MEMORY_NODE_DETAIL SHARED_MEMORY_DETAIL 父主题： DBE_PERF Schema

查看更多 →

的最大值。 process_used_memory：进程所使用的内存大小。 max_dynamic_memory：最大动态内存。 dynamic_used_memory：已使用的动态内存。 dynamic_peak_memory：内存的动态峰值。 dynamic_used_shrctx：已使用的动态共享内存上下文。

查看更多 →

Memory GS_SHARED_MEMORY_DETAIL GLOBAL_MEMORY_NODE_DETAIL GLOBAL_SHARED_MEMORY_DETAIL MEMORY_NODE_DETAIL SHARED_MEMORY_DETAIL 父主题： DBE_PERF Schema

查看更多 →

的最大值。 process_used_memory：进程所使用的内存大小。 max_dynamic_memory：最大动态内存。 dynamic_used_memory：已使用的动态内存。 dynamic_peak_memory：内存的动态峰值。 dynamic_used_shrctx：已使用的动态共享内存上下文。

查看更多 →

在FusionInsight Manager首页，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”，选择“JDBCServer2x > 性能”，“SPARK_DRIVER_MEMORY”参数的默认值为4G，可根据如下原则进行调整：若偶现告警，可以按0.5倍速率

查看更多 →

5版本，无需执行安装操作。 如果未查到PV driver版本信息，或者PV driver的版本低于或等于2.5版本，执行安装PV driver或安装PV driver升级包。 前提条件 云服务器 已安装操作系统，并且已经绑定弹性公网IP。 云 服务器 的系统磁盘的剩余空间必须大于32MB。

查看更多 →