后端岗位面试题更新 2026-08-05
如何设计一个方案，处理内存中几个TB的文本数据，每行由多个分隔符分开的字段组成，需要找出不同行中是否有重复的元素，且不允许使用数据库或中间件？
招商银行·招银网络科技后端开发金融系统设计技术原理方案权衡
考察说明
考察海量数据处理中的内存优化、去重算法和性能权衡
回答思路
- 明确数据规模与内存限制，考虑分片或外部排序
- 提出哈希、布隆过滤器或位图等去重方案并说明适用场景
- 分析IO与计算开销，讨论分批处理和全局合并
- 在5分钟追问下展示方案演进和取舍
本题附完整参考答案与评分标准
登录后可查看结构化答题指导；也可以直接开一场模拟面试，AI 面试官用本题实时追问并给出评分。
