# 如何处理小文件问题
Paimon表在频繁执行INSERT、UPDATE、DELETE等操作后会产生大量小文件，影响查询性能和存储效率。
小文件问题主要表现在两个方面：
- 数据文件过多导致查询时需要打开大量文件。
- Manifest文件过多导致元数据膨胀。
#### 解决方案
Paimon提供以下机制处理小文件问题：
- 同步Compaction：在写入时自动触发Compaction，将小文件合并为大文件。通过设置write.auto-compaction=true开启。
- 异步Compaction：通过Flink或Spark触发异步Compaction任务，在后台合并小文件，不影响写入性能。通过设置compaction.optimization-interval参数控制异步Compaction的触发间隔。
- 写入参数调优：合理设置target-file-size参数控制目标文件大小，设置compaction.min.file-num和compaction.max.file-num参数控制Compaction的触发条件和合并范围。
- Sorted Run合并：对于主键表，Paimon基于LSM-Tree结构通过Sorted Run合并机制减少文件数量。通过设置num-sorted-run.compaction-trigger参数控制触发合并的Sorted Run数量。
 
#### 建议
- 对于流式写入场景，建议开启异步Compaction，避免同步Compaction对写入性能的影响。
- 定期监控表的文件数量和平均文件大小，当文件数量异常增长时及时触发Compaction。
- 合理设置Compaction参数，避免过度Compaction导致的资源浪费和写入延迟。