在 Vitess 查询规划器中优化聚合
内容提要
Vitess 查询规划器通过修复优化器中的一个错误来优化查询执行。它使用树重写将操作推向更接近数据的位置，从而减少数据检索和排序成本。通过延迟启用“聚合下排序”重写器，将聚合操作推到连接操作下。大多数聚合操作被推送到 MySQL，只需要在 VTGate 级别对每个分片进行 SUM。这种优化展示了查询规划的复杂性以及树重写在 Vitess 中的重要性。
延伸解读
问题背景：聚合无法下推导致 OOM
用户查询在连接后按右表字段分组并排序，规划器最初无法将聚合下推到 MySQL，导致 VTGate 需要拉取大量数据并在内存中聚合，可能引发 OOM。这凸显了聚合下推对资源消耗的关键影响。
优化手段：延迟启用排序下推重写器
通过将“排序下推到聚合之下”的重写器延迟到“拆分聚合”阶段启用，规划器得以先将聚合下推到连接之下。这样既保留了排序下推的能力，又避免了排序阻塞聚合下推，使更多工作能在 MySQL 端完成。
最终效果：聚合大部分下推到 MySQL
优化后的计划将聚合操作推送到 MySQL 分片执行，VTGate 仅需对每个分片返回的 SUM 结果进行最终求和。这显著减少了 VTGate 处理的数据量，提升了查询性能和资源利用率。
启示：树重写与阶段控制的重要性
该案例展示了 Vitess 查询规划器中树重写的复杂性。通过多阶段推送重写器并控制其启用时机，可以解决看似棘手的优化问题。理解重写器的交互和阶段划分，有助于诊断和优化类似查询。
Q&A
Vitess 查询规划器是如何优化查询执行的？
Vitess 查询规划器通过修复优化器中的错误和使用树重写技术，将操作推向更接近数据的位置，从而优化查询执行。
什么是树重写，它在 Vitess 中有什么作用？
树重写是将操作推向数据更近的位置的过程，在 Vitess 中，它用于减少数据检索和排序成本，优化查询计划。
延迟启用“聚合下排序”重写器有什么好处？
延迟启用“聚合下排序”重写器可以在分割聚合阶段将聚合操作推到连接操作下，从而减少数据处理量，提高查询性能。
Vitess 中的聚合操作是如何处理的？
大多数聚合操作被推送到 MySQL，VTGate 仅需对每个分片进行 SUM，从而减少了数据处理的复杂性。
查询规划的复杂性如何影响性能？
查询规划的复杂性通过影响操作的推送和执行顺序，直接影响查询性能和资源利用率。
Vitess 查询规划器如何处理错误？
Vitess 查询规划器通过修复优化器中的错误来改进查询执行，确保聚合操作能够有效地推送到 MySQL。
