请解释Impala查询优化器的运行机制，并给出针对复杂查询的调优方法。

回答思路

1. 【回答框架 1】Impala的查询优化器基于代价优化（CBO），通过解析SQL生成逻辑计划，再转换为物理计划，并利用统计信息估算执行代价，选择最优执行方案。优化器会考虑表连接顺序、谓词下推、分区裁剪等技术来减少扫描和计算开销。
2. 【回答框架 2】调优复杂查询时，首先确保收集准确的表统计信息，使用COMPUTE STATS命令，使优化器有可靠的代价估算。其次，检查查询是否有效利用分区，避免全表扫描，尽量通过WHERE条件过滤分区。
3. 【回答框架 3】合理设置连接顺序，小表在前或使用提示（如STRAIGHT_JOIN）引导优化器。对于多表连接，考虑使用广播连接或分区连接，减少数据shuffle。分析执行计划（EXPLAIN输出），定位高代价操作（如大表扫描、sort、join）。
4. 【回答框架 4】针对资源限制，调整Impala内存和并发参数，如mem_limit、queue limits。对于复杂查询，可拆分为多个子查询，使用临时表或中间结果化，避免过大的单次操作。
5. 【回答框架 5】定期监控和测试，使用近似的查询测试不同优化方案，根据实际执行时间和资源消耗评估效果，结合压测和业务场景调优。
6. 【关键点 1】优化器基于统计信息的代价估算选择执行方案。
7. 【关键点 2】COMPUTE STATS收集统计信息是调优基础。
8. 【关键点 3】利用分区裁剪和谓词下推减少数据扫描。
9. 【关键点 4】通过EXPLAIN分析执行计划定位瓶颈。
10. 【关键点 5】合理设置连接顺序和连接策略减少数据shuffle。
11. 【易错点 1】忽视统计信息，使用过时或不完整的统计导致优化器错误决策。
12. 【易错点 2】过度依赖手动提示，可能硬编码低效执行计划。
13. 【易错点 3】忽略资源限制，复杂查询可能导致内存溢出或队列等待。