awesome-pretrained-chinese-nlp-models

lonePatient/awesome-pretrained-chinese-nlp-models

高质量中文预训练模型集合

5.6k
Stars
515
Forks
6
Open issues
93
Watchers
Python MITLast pushed Jun 19, 2026

Overview

awesome-pretrained-chinese-nlp-models 是一个汇聚了多种类型、高质量的中文自然语言处理预训练模型的仓库,包括大模型和多模态模型。这些模型被广泛应用于NLU与NLG相关任务。

Categories

Tags

Similar tools

Install

pip install awesome-pretrained-chinese-nlp-models

README

Awesome Pretrained Chinese NLP Models

在自然语言处理领域中,预训练语言模型(Pretrained Language Models)已成为非常重要的基础技术,本仓库主要收集目前网上公开的一些高质量中文预训练模型、中文多模态模型、中文大语言模型等内容(感谢分享资源的大佬),并将持续更新......

国内下载HuggingFace仓库模型推荐使用HuggingFace镜像地址: https://hf-mirror.com/

📑 目录导航


📚 模型分类索引

🤖 大模型系列

分类说明链接
通用基础大模型参数 >7B 的基础语言模型查看
垂直基础大模型金融、医疗、法律等垂直领域查看
通用对话大模型对话式通用语言模型查看
垂直对话大模型垂直领域对话模型查看
多模态对话大模型图文等多模态模型查看
推理类大模型数学、逻辑推理模型查看

🔧 预训练模型系列

系列代表模型链接
NLU系列BERT · RoBERTa · ALBERT · ERNIE · MacBERT · ELECTRA查看全部 29 个
NLG系列GPT · GPT-3 · T5 · BART · CPM · RWKV查看全部 18 个
NLU-NLG系列UniLM · GLM · CPT · SimBERT查看全部 9 个
多模态系列WenLan · CogView · Chinese-CLIP · OFA查看全部 13 个

📦 资源与工具

📊 大模型评估基准 · 📦 开源模型库平台 · 📚 开源数据集库 · 📝 中文指令数据集 · 🎯 Embedding · 🔗 Other-Awesome


📌 备注说明

ND: Non-Causal Decoder (非因果解码器) | CD: Causal Decoder (因果解码器) | ED: Encoder-Decoder (编码器-解码器)


Base-LLM

大规模基础模型:表格中只罗列出参数量大于7B以上模型。查看完整列表 →

模型大小时间语言架构下载项目机构备注
XVERSE-MoE255B / A36B2024-09中英MoE🤗HFGitHubxverse-ai-
Qwen-2.50.5~72B (7档)2024-09中英CD🤗HFGitHubQwenLMBlog
Tele-FLM52B / 102B / 1TB2024-07多语CD🤗HF-CofeAIPaper
meta-llama-3.18B / 70B / 405B2024-07多语CD🤗HF