#588·BitNet

[错误]: BitNet FFN 使用 SILU 而不是 ReLU² — Perplexity 在每个 CPU 后端上的比率为 99.8 与 17.1

作者: hmeiland创建于 2026年7月19日更新于 2026年9月13日

Model: microsoft/BitNet-b1.58-2B-4T (ggml-model-i2_s.gguf, ggml-model-tl1.gguf) Where: 3rdparty/LLaMA.cpp submodule → src/models/bitnet.cpp (the pinned isHuangXin/LLaMA.cpp@390c3077), also present in current ggml-org/LLaMA.cpp master.

内容来源: microsoft/BitNet