AI 简历
简历模板
简历范文
模拟面试
校招
求职攻略
关于我们
我要招人
登录
登录
AI 简历
简历模板
简历范文
模拟面试
校招
求职攻略
关于我们
我要招人
首页
面试题库
人工智能面试题
对于超长序列(如超过 10 万 tokens)的…
人工智能面试题
更新 2026-08-05
对于超长序列(如超过 10 万 tokens)的处理场景,你会如何设计存储与线上推理方案来降低延迟?请说明关键取舍,并谈谈‘在序列上加 ROI(感兴趣区域)’这类做法是否值得投入。
深圳虾皮信息科技有限公司
人工智能
互联网/IT
性能优化
系统设计
方案权衡
考察说明
考察长序列处理中的存储与推理延迟优化,以及效益权衡判断
回答思路
指出存储侧可用的分块、索引或摘要策略
说明推理延迟来源,如注意力复杂度与显存占用
讨论稀疏注意力、降采样或 ROI 提取的实际收益与局限
体现对成本、效果与工程复杂度的权衡意识
换一题
上一题
请问你训练数据集的数据配比是如何设计的?
下一题
为什么ResNet没有像Transformer那样不断堆参数规模?
本题还出现在
互联网/IT行业面试题
深圳虾皮信息科技有限公司面试题