关于微调分词器
Author: Yangxiangjun9Created Nov 12, 2025Updated Aug 27, 2026
我的环境是 Intel CPU + 集成显卡,不支持 NVIDIA GPU 的 CUDA 生态。 已用此命令
- torchrun --standalone --nproc_per_node=1 finetune/train_tokenizer.py 出现上图错误 2.set USE_LIBUV=0 && torchrun --standalone --nproc_per_node=1 finetune/train_tokenizer.py 运行第二个命令同样出现图片中相同错误。 想请问一下该怎么解决,麻烦了 @
Source: shiyu-coder/Kronos