请解释大语言模型分词器（Tokenizer）的工作原理，并说明其常见实现方式及其对模型的影响。

回答思路

1. 能解释分词器将文本转换为模型可处理的token序列的基本流程
2. 能列举并比较BPE、WordPiece、SentencePiece等常见分词算法
3. 能说明分词器如何处理未登录词、大小写、数字等特殊场景
4. 能讨论词表大小、分词粒度对模型性能、推理速度及多语言能力的影响