和 LLM 打交道的朋友无论如何都绕不过 special tokens 和 chat template 这两个概念。说来神奇，既然是每天打交道的概念，总该有很好的参考资料吧，但是为了写这篇文档，我和朋友四处寻找，能找到的只有 HuggingFace 零星的文档。然而，如果处理不好 special tokens 和 chat ...