长的空白标记会被解析为空字节,从而中断 tokenize/detokenize 的往返过程

作者: gbjones创建于 2026年9月4日更新于 2026年9月4日

Prerequisites

内容来源: abetlen/llama-cpp-python