对于文件分词,遇到大量数据会卡住。

作者: Zycheng114514创建于 2024年10月23日更新于 2024年10月23日

原因尚不清楚,似乎是线程的问题,因为只要设置“nthread=1”,即强制使用单线程就可以了。

内容来源: lancopku/pkuseg-python