LLMSurvey
人大团队维护的LLM领域全景知识库,含论文索引、Prompt技巧与实验代码
加载项目详情…
本应用为开源项目,仅供学习研究,请遵守其开源协议。
人大团队维护的LLM领域全景知识库,含论文索引、Prompt技巧与实验代码
加载项目详情…
本应用为开源项目,仅供学习研究,请遵守其开源协议。
想象你是一位刚踏入AI领域的研究生,面前是一片茫茫大海——arXiv每天新增数百篇论文,GPT-4、Claude、LLaMA、DeepSeek各路模型层出不穷,你该从哪里开始建立对大语言模型(LLM)的系统性认知?
这个问题,困扰了全球数十万研究者和开发者。而中国人民大学信息学院赵翔、周坤等组成的豪华作者团队,给出了一个优雅的答案——他们维护了一个名为 LLMSurvey 的开源项目,将2023年发表的里程碑综述论文《A Survey of Large Language Models》作为骨架,搭建了一座持续更新的LLM知识百科全书。
这个项目目前在GitHub上已收获超过 12,000颗星,成为LLM领域被引用最广泛的Survey类资源之一,被众多高校实验室和科技公司列为新生必读资料。

图1:LLM Survey中文书籍封面。该书面向深度学习基础扎实的本科生和研究生,可作为入门级技术读物。
2023年3月,赵翔、周坤等人将论文《A Survey of Large Language Models》发布在arXiv(编号2303.18223)。论文系统梳理了LLM的发展脉络,从GPT-1到GPT-4的技术演进、从预训练到指令微调的核心范式迁移,都被梳理得清晰明了。
但论文只是起点。作者团队并没有止步于发表后置之不理,而是持续将这份综述扩展为一个活的知识库:每当LLM领域出现重大进展(如DeepSeek-R1的长链推理范式、OpenAI o系列模型),团队就会在仓库中更新对应章节,让知识库与前沿保持同步。
这种持续维护的力度相当惊人:仓库最后更新时间为2025年3月,至今仍保持活跃。从一个24人署名作者名单可以看出,这是一个有组织、成规模的学术团队在持续投入,而非个人一时兴起。
项目核心内容包括:
如果只是论文列表,这个仓库的价值会大打折扣。作者团队将资源库拓展到了实践层面,提供了两类极其实用的工具:
Prompt工程手册:在Prompts目录下,团队整理了数十条经过验证的Prompt设计原则和示例,例如"任务描述要尽可能详细"、"告诉模型它是一个专家"、"用模型友好的格式组织输出"等,每条原则都配有具体的Prompt示例和适用场景说明。这些经验来自作者团队自身的使用积累,而非泛泛而谈。
实验复现代码:Experiments目录提供了在LLaMA-7B模型上的指令微调(Instruction Tuning)和能力评估(Ability Evaluation)实验代码,涵盖语言生成、知识利用、符号推理、数学推理、工具操控等多个能力维度的评测方案和实验数据。研究者可以直接基于这些代码复现实验结果,或在其基础上扩展自己的实验。

图2:长链推理(Long CoT)示例图,展示了DeepSeek-R1和OpenAI o系列模型采用的"先思考再回答"范式。
特别值得注意的是,项目最新版本加入了关于 Long CoT(长链推理) 的专题讨论,深入分析了DeepSeek-R1和OpenAI o系列模型的核心技术路径——即在响应之前给模型更多"思考时间",通过数据蒸馏、搜索式数据合成、多智能体协作等方式构建长推理链训练数据,并采用强化学习进行训练扩展。
从代码层面看,这是一个典型的纯学术资源型仓库,而非可执行软件项目。
仓库以Markdown为核心表达格式,辅以Python脚本处理实验数据和生成图表。Experiments目录下的代码使用Python实现,包含数据处理、模型微调、评测脚本等模块,整体架构清晰,适合作为研究生课程的项目模板参考。
项目采用GitHub作为发布平台,所有内容免费开放,支持Pull Request提交修正和补充——这意味着整个知识库是社区共建的,任何人都可以为知识库贡献最新论文或修正错误。这种开放的协作模式,是该项目能够持续保持与前沿同步的核心原因。
综述类项目的天然局限在于时效性。LLM领域变化极快,今天的分析可能在三个月后就需要更新。项目虽然通过持续提交保持活跃,但很难做到对每个新模型的深入分析——这与论文发表后的peer review机制不同,GitHub上的更新缺乏严格的学术审核。
此外,项目主要覆盖英文论文生态,对中文LLM(如ChatGLM、Qwen、文心、通义等)的梳理深度不如英文模型系统,在中文LLM快速发展的背景下存在一定的内容缺口。
LLMSurvey的价值,不仅在于它提供了一份"去哪里找论文"的清单,更在于它代表了一种学术开放精神的实践范式:
团队选择将耗时数月的文献梳理工作完全开源,免费提供中文书籍PDF和英文综述下载,允许任何人基于此进行二次研究和商业应用。这种选择,在商业化AI浪潮中显得格外难得。
从影响力来看,该论文在arXiv的引用量和GitHub的star数相互印证了其学术认可度。对于AI研究者和从业者而言,这座持续更新的知识库是快速建立LLM领域全景认知的可靠起点;对于教育者而言,其结构化的目录体系和配套实验代码,是设计LLM相关课程的优质参考资料。
当LLM军备竞赛愈演愈烈的时候,或许最值得记住的,不只是那些"最强"的模型本身,还有那些为整个社区默默绘制地图的人。