人工智能面试题更新 2026-08-05

多模态大模型训练时,是只训练LLM部分,还是与ViT图像编码模块一起训练?

拼多多集团-PDD人工智能电商技术原理技术选型方案权衡LLM

考察说明

考察对多模态模型训练策略、参数冻结与联合训练原理的理解

回答思路

  1. 能区分不同训练阶段(预训练、微调)的策略差异
  2. 说明联合训练与冻结编码器的适用场景与权衡
  3. 提及适配器或投影层等中间组件的训练方式
  4. 能结合典型模型(如LLaVA)说明常见做法