我要招人

互联网/IT行业面试题更新 2026-08-05

如何提升或弥补CLIP模型的zero-shot能力？

淘天集团人工智能互联网/IT问题拆解技术原理方案权衡

考察说明

考察对CLIP零样本分类原理、局限与常用优化手段的理解

回答思路

  1. 说明CLIP通过图文对比学习获得泛化表征支撑零样本分类
  2. 指出影响零样本效果的关键因素如类别差异、描述文本、数据分布
  3. 提出可操作的改进方法如Prompt Engineering、Few-shot微调、模型结构优化
  4. 能区分训练策略与推理策略导致的边界问题