请说明在 Spark SQL 中实现高效二次排序的具体方法。

回答思路

1. 【回答框架 1】二次排序是指先按一个字段排序，再在相同的第一字段值内按第二字段排序。在 Spark SQL 中，可以通过使用 struct 类型作为排序键来实现，因为 struct 的排序规则是先比较第一个字段，若相同再比较第二个字段。
2. 【回答框架 2】具体做法是：先将需要排序的多个字段组合成一个 struct 或 row，然后使用 order by 对 struct 排序。例如，使用 order by struct（字段1，字段2），这样就能实现先按字段1升序，再按字段2升序。
3. 【回答框架 3】对于更复杂的场景，可以使用 DataFrame 的 sort 或 sortWithinPartitions 方法，配合自定义的排序表达式。sortWithinPartitions 可以在每个分区内排序，避免全局重排，但需要注意分区本身可能不保证全局有序。
4. 【回答框架 4】还可以考虑使用 RDD 的 repartitionAndSortWithinPartitions 配合自定义分区器和排序键，但 SQL 层通常直接用 struct 更简洁。
5. 【关键点 1】使用 struct 作为排序键进行二次排序。
6. 【关键点 2】sortWithinPartitions 可提升分区内排序效率，但需注意全局顺序。
7. 【关键点 3】排序键的设计应尽量简洁，避免过度复杂。
8. 【易错点 1】直接使用多个 order by 字段并不能实现二次排序，只会按第一个字段排序，需字段组合。
9. 【易错点 2】sortWithinPartitions 并不保证全局有序，若需全局有序必须使用 order by 或 repartition。
10. 【易错点 3】当排序字段较多时，struct 嵌套可能影响性能，需权衡。