专业服务行业面试题更新 2026-08-05
请实现一个Tokenizer，要求只能用PyTorch基础语法完成。
百度人工智能专业服务编码实现问题拆解技术原理PyTorch
考察说明
考察用PyTorch基础操作实现文本分词器的能力，兼顾算法与工程实现
回答思路
- 明确分词规则（如按空格或标点切分）
- 使用PyTorch张量或基础API完成句子级编码
- 正确处理未知词、填充与截断的边界情况
- 给出可运行的结构和清晰注释
本题附完整参考答案与评分标准
登录后可查看结构化答题指导；也可以直接开一场模拟面试，AI 面试官用本题实时追问并给出评分。
