# Awesome Pretrained Chinese NLP Models[](https://awesome.re)
在自然语言处理领域中，预训练语言模型（Pretrained Language Models）已成为非常重要的基础技术，本仓库主要收集目前网上公开的一些高质量中文预训练模型、中文多模态模型、中文大语言模型等内容(感谢分享资源的大佬)，并将持续更新......
> 国内下载HuggingFace仓库模型推荐使用HuggingFace镜像地址:
## 目录导航
***
## 模型分类索引
### 大模型系列
| 分类 | 说明 | 链接 |
| :------- | :------------- | :------------------------ |
| 通用基础大模型 | 参数 >7B 的基础语言模型 | [查看](#Base-LLM) |
| 垂直基础大模型 | 金融、医疗、法律等垂直领域 | [查看](#Domain-Base-LLM) |
| 通用对话大模型 | 对话式通用语言模型 | [查看](#chatllm) |
| 垂直对话大模型 | 垂直领域对话模型 | [查看](#domain-chatllm) |
| 多模态对话大模型 | 图文等多模态模型 | [查看](#multimodal-chatllm) |
| 推理类大模型 | 数学、逻辑推理模型 | [查看](#reasoningllm) |
### 预训练模型系列
| 系列 | 代表模型 | 链接 |
| :------------ | :-------------------------------------------------- | :------------------------ |
| **NLU系列** | BERT · RoBERTa · ALBERT · ERNIE · MacBERT · ELECTRA | [查看全部 29 个](docs/nlu-models.md) |
| **NLG系列** | GPT · GPT-3 · T5 · BART · CPM · RWKV | [查看全部 18 个](docs/nlg-models.md) |
| **NLU-NLG系列** | UniLM · GLM · CPT · SimBERT | [查看全部 9 个](docs/nlu-nlg-models.md) |
| **多模态系列** | WenLan · CogView · Chinese-CLIP · OFA | [查看全部 13 个](docs/multimodal-models.md) |
### 资源与工具
[ 大模型评估基准](#大模型评估基准) · [ 开源模型库平台](#开源模型库平台) · [ 开源数据集库](#开源数据集库) · [ 中文指令数据集](docs/chinese-instruct-datasets.md) · [ Embedding](#Embedding) · [ Other-Awesome](docs/other-awesome.md)
***
** 备注说明**
> **ND:** Non-Causal Decoder (非因果解码器) | **CD:** Causal Decoder (因果解码器) | **ED:** Encoder-Decoder (编码器-解码器)
***
## Base-LLM
> 大规模基础模型：表格中只罗列出参数量`大于7B`以上模型。[查看完整列表 →](docs/base-llm.md)
| 模型 | 大小 | 时间 | 语言 | 架构 | 下载 | 项目 | 机构 | 备注 |
| :--- | :--- | :--- | :--- | :--- | :--- | :--- | :--- | :--- |
| XVERSE-MoE | 255B / A36B | 2024-09 | 中英 | MoE | [HF](https://huggingface.co/xverse/XVERSE-MoE-A36B) | [GitHub](https://github.com/xverse-ai/XVERSE-MoE-A36B) | xverse-ai | - |
| Qwen-2.5 | 0.5\~72B (7档) | 2024-09 | 中英 | CD | [HF](https://huggingface.co/collections/Qwen/qwen25-66e81a666513e518adb90d9e) | [GitHub](https://github.com/QwenLM/Qwen2.5) | QwenLM | [Blog](https://qwenlm.github.io/blog/qwen2.5/) |
| Tele-FLM | 52B / 102B / 1TB | 2024-07 | 多语 | CD | [HF](https://huggingface.co/CofeAI) | - | CofeAI | [Paper](https://arxiv.org/pdf/2404.16645) |
| meta-llama-3.1 | 8B / 70B / 405B | 2024-07 | 多语 | CD | [HF](https://huggingface.co/meta-llama) | [GitHub](https://github.com/meta-llama/llama3) | meta-llama | - |
| internlm2.5-Base | 7B | 2024-07 | 中英 | CD | [HF](https://huggingface.co/internlm) | [GitHub](https://github.com/InternLM/InternLM) | InternLM | [Technical Report](https://arxiv.org/abs/2403.17297) |
> 查看全部 40+ 个模型请访问 [Base-LLM 完整列表 →](docs/base-llm.md)
[Back to Top]
## Domain-Base-LLM
> 各个垂直领域开源基础模型。[查看完整列表 →](docs/domain-base-llm.md)
| 模型 | 大小 | 时间 | 语言 | 领域 | 下载 | 项目地址 | 机构/个人 | 架构 | 文献 | 备注 |
| :-----------------: | :-------: | ------- | :-: | -- | :-----------------------------------------------------------------------------------: | :-------------------------------------------------------------------------------: | :------------------------------------------------------------: | :-: | :---------------------------------------------------------------------------------: | ------ |
| Qwen-2.5 | 1.5/7B | 2024-09 | 中英 | 代码 | [HF](https://huggingface.co/collections/Qwen/qwen25-coder-66eaa22e6f99801bf65b0c2f) | [Qwen2.5](https://github.com/QwenLM/Qwen2.5) | [QwenLM](https://github.com/QwenLM) | CD | [Blog](https://qwenlm.github.io/blog/qwen2.5/) |
| Qwen-2.5 | 1.5/7/72B | 2024-09 | 中英 | 数学 | [HF](https://huggingface.co/collections/Qwen/qwen25-math-66eaa240a1b7d5ee65f1da3e) | [Qwen2.5](https://github.com/QwenLM/Qwen2.5) | [QwenLM](https://github.com/QwenLM) | CD | [Blog](https://qwenlm.github.io/blog/qwen2.5/) |
| Tongyi-Finance-Base | 14B | 2023-11 | 中文 | 金融 | [ModelScope](https://modelscope.cn/models/TongyiFinance/Tongyi-Finance-14B/summary) | [通义金融-14B](https://modelscope.cn/models/TongyiFinance/Tongyi-Finance-14B/summary) | [通义金融大模型](https://modelscope.cn/organization/TongyiFinance) | CD |
| ChiMed-GPT | 13B | 2023-10 | 中文 | 医疗 | \[[HF\]](https://huggingface.co/SYNLP/ChiMed-GPT-1.0) | [ChiMed-GPT](https://github.com/synlp/ChiMed-GPT) | [中国科学技术大学](https://github.com/synlp) | CD | [Paper](https://arxiv.org/abs/2311.06025) |
| CodeShell-base | 7B | 2023-10 | 中英 | 代码 | \[[HF\]](https://huggingface.co/WisdomShell/CodeShell) | [codeshell](https://github.com/WisdomShell/codeshell) | [WisdomShell](https://github.com/WisdomShell) | CD |
> 查看全部 13 个模型请访问 [Domain-Base-LLM 完整列表 →](docs/domain-base-llm.md)
[Back to Top]
## ChatLLM
> 具备问答和对话等功能的大型语言模型。[查看完整列表 →](docs/chat-llm.md)
| 模型 | 大小 | 时间 | 架构 | 下载 | 项目 |
| :--- | :--- | :--- | :--- | :--- | :--- |
| GLM-4.6 | A32/355B | 2025-10 | MoE | [HF](https://huggingface.co/zai-org/GLM-4.5-Base) | [GLM-4.5](https://github.com/zai-org/GLM-4.5) |
| Ling-1T | 1T | 2025-10 | CD | [HF](https://huggingface.co/inclusionAI/Ling-1T) | / |
| Qwen3-Next | A3/80B | 2025-09 | MoE | [HF](https://huggingface.co/Qwen/Qwen3-Next-80B-A3B-Instruct) | [Qwen3](https://github.com/QwenLM/Qwen3) |
| Kimi-k2 | A32B/1T | 2025-08 | MoE | [HF](https://huggingface.co/moonshotai/Kimi-K2-Instruct) | [Kimi-K2](https://github.com/MoonshotAI/Kimi-K2) |
| ERNIE-4.5 | A47/300B A3/21B | 2025-07 | MoE | [HF](https://huggingface.co/baidu) | / |
| Qwen-3 | 4/14/30/235B | 2025-05 | CD/MoE | [HF](https://huggingface.co/collections/Qwen/qwen3-67dd247413f0e2e4f653967f) | [Qwen3](https://github.com/QwenLM/Qwen3) |
| MiMo | 7B | 2025-05 | CD | [HF](https://huggingface.co/XiaomiMiMo) | [MiMo](https://github.com/XiaomiMiMo/MiMo) |
| deepseek-v3 | 671B | 2024-12 | MoE | [HF](https://huggingface.co/deepseek-ai/DeepSeek-V3) | [DeepSeek-V3](https://github.com/deepseek-ai/DeepSeek-V3) |
| Hunyuan-Large | A52/389B | 2024-11 | MoE | [HF](https://huggingface.co/tencent/Tencent-Hunyuan-Large) | [Tencent-Hunyuan-Large](https://github.com/Tencent/Tencent-Hunyuan-Large) |
| Qwen-2.5 | 0.5/1.5/3/7/14/32/72B | 2024-09 | CD | [HF](https://huggingface.co/collections/Qwen/qwen25-66e81a666513e518adb90d9e) | [Qwen2.5](https://github.com/QwenLM/Qwen2.5) |
| MiniCPM3 | 4B | 2024-09 | CD | [HF](https://huggingface.co/openbmb/MiniCPM3-4B) | [MiniCPM](https://github.com/OpenBMB/MiniCPM) |
> 查看全部 180+ 个模型请访问 [ChatLLM 完整列表 →](docs/chat-llm.md)
## Domain-ChatLLM
> 各个垂直领域开源对话模型。[查看完整列表 →](docs/domain-chat-llm.md)
| 模型 | 大小 | 时间 | 领域 | 下载 | 项目 |
| :--- | :--- | :--- | :--- | :--- | :--- |
| Qwen3-Coder-Next | / | 2026-02 | 代码 | [HF](https://huggingface.co/Qwen) | [Qwen3](https://github.com/QwenLM/Qwen3) |
| Skywork-SWE | 32B | 2025-06 | 软件工程 | [HF](https://huggingface.co/Skywork/Skywork-SWE-32B) | / |
| Kimi-Dev | / | 2025-06 | 代码 | [HF](https://huggingface.co/moonshotai) | / |
| Qwen3-Coder | / | 2025-08 | 代码 | [HF](https://huggingface.co/Qwen) | [Qwen3](https://github.com/QwenLM/Qwen3) |
| DeepSeek-Coder-V2 | A21/236B | 2024-06 | 代码 | [HF](https://huggingface.co/deepseek-ai/DeepSeek-Coder-V2-Instruct) | [DeepSeek-Coder-V2](https://github.com/deepseek-ai/DeepSeek-Coder-V2) |
| CodeGeeX4 | 9B | 2024-07 | 代码 | [HF](https://huggingface.co/THUDM/codegeex4-all-9b) | [CodeGeeX4](https://github.com/THUDM/CodeGeeX) |
| Yi-Coder | 1.5/9B | 2024-09 | 代码 | [HF](https://huggingface.co/01-ai) | [Yi-Coder](https://github.com/01-ai/Yi-Coder) |
| OpenCoder | 1.5/8B | 2024-11 | 代码 | [HF](https://huggingface.co/infly/OpenCoder) | [OpenCoder](https://github.com/OpenCoder-4/OpenCoder) |
> 查看全部 60+ 个模型请访问 [Domain-ChatLLM 完整列表 →](docs/domain-chat-llm.md)
## MultiModal-ChatLLM
> 收集包含中文的多模态大模型，具备对话等功能。[查看完整列表 →](docs/multimodal-chat-llm.md)
| 模型 | 大小 | 时间 | 领域 | 下载 | 项目 |
| :--- | :--- | :--- | :--- | :--- | :--- |
| MiniMax-Music3 | ≈11B | 2026-08 | 文音 | [HF](https://huggingface.co/MiniMaxAI/MiniMax-Music3) | [MiniMax-Music3](https://github.com/MiniMax-AI/MiniMax-Music3) |
| MiniMax-H3 | 33B | 2026-07 | 音视频 | [HF](https://huggingface.co/MiniMaxAI/MiniMax-H3) | [MiniMax-H3](https://github.com/MiniMax-AI/MiniMax-H3) |
| HY-World-2.0 | 1.2B | 2026-04 | 3D世界 | [HF](https://huggingface.co/tencent/HY-World-2.0) | [HY-World-2.0](https://github.com/Tencent/HY-World-2.0) |
| Gemma-4-IT | E2B~31B | 2026-04 | 通用 | [HF](https://huggingface.co/collections/google/gemma-4) | - |
| Qianfan-OCR | 4B | 2026-03 | 文档 | [HF](https://huggingface.co/baidu/Qianfan-OCR) | [GitHub](https://github.com/baidubce/Qianfan-VL) |
> 查看全部 90+ 个模型请访问 [MultiModal-ChatLLM 完整列表 →](docs/multimodal-chat-llm.md)
## ReasoningLLM
> 收集推理能力比较突出的中文大模型。[查看完整列表 →](docs/reasoning-llm.md)
| 模型 | 大小 | 时间 | 架构 | 下载 | 项目 |
| :--- | :--- | :--- | :--- | :--- | :--- |
| Hy4-preview | A49/770B | 2026-08 | MoE | [HF](https://huggingface.co/tencent/Hy4-preview) | [Hy4-preview](https://github.com/Tencent-Hunyuan/Hy4-preview) |
| GLM-5.3-Flash | A18/320B | 2026-08 | MoE | [HF](https://huggingface.co/zai-org/GLM-5.3-Flash) | [GLM-5](https://github.com/zai-org/GLM-5) |
| GLM-5.3 | / | 2026-08 | MoE | [HF](https://huggingface.co/zai-org/GLM-5.3) | [GLM-5](