人工智能面试题更新 2026-08-05
在微调阶段,你会如何选择 Qwen 模型中适合 LoRA 微调的层?请说明理由。
滴滴人工智能技术原理方案权衡LoRA
考察说明
考察对 LoRA 微调原理的理解及针对特定模型结构的层选择策略
回答思路
- 说明 LoRA 微调的基本原理和目标
- 能结合 Qwen 的模型结构(如 Transformer block 的组成)分析不同层(注意力层、前馈层)对下游任务的影响
- 提出选择特定层的判断依据,如实验对比、任务相关性、资源约束
- 表达对全参数微调与部分层微调差异的理解
本题附完整参考答案与评分标准
登录后可查看结构化答题指导;也可以直接开一场模拟面试,AI 面试官用本题实时追问并给出评分。