从零训练最小大模型，成本仅需两小时

MiniMind 是一个完全开源的轻量级大语言模型训练项目，基于 PyTorch 实现，仅需两块消费级显卡即可在两小时内从零训练一个 6.4 亿参数的 LLM。项目代码简洁清晰，涵盖数据预处理、预训练、监督微调和 LoRA 微调等完整流程，是学习大模型底层原理的绝佳实践资源。本周该项目新增星标 3816 个，总星标数已达 59474 个，受到社区广泛关注。项目地址：https://github.com/jingyaogong/minimind

📂 原文链接：查看原文 →