Apache Iceberg 如何通过合并 1,000 个文件提升查询性能

作者将 1,000 个 Apache Iceberg 文件合并为 6 个，测试了查询性能的变化。实验使用本地环境，通过 PySpark 4.0.3 和 Iceberg 1.11.0 运行，未涉及云服务或分布式集群。合并后三种 SQL 工作负载的性能显著提升，表明 compaction 对减少元数据开销和优化查询处理有实际效果。