llms-from-scratch-cn

收录理由

如果你平时只是通过API调用大模型，心里却一直好奇它内部到底怎么运作，这本中文教程是个不错的起点。它默认你只有基本的Python功底和一点点PyTorch基础，然后带着你从tokenization、预训练一路走到微调，每一步都有能直接运行的Jupyter notebook。除了GPT风格的主线，还额外逐步实现了GLM4、Llama3和RWKV6，让读者能看到这些模型在代码层面的真实结构。工程师翻一翻notebook，能更清楚地理解自己日常使用的模型底层在做什么；教师也可以直接把内容拿去做课件，毕竟大多数教程一上来就讲微调和部署，反而把最关键的架构实现跳过了。这是一个学习资料，不是拿来部署的工具，适合在真正动手写一个从零开始的项目之前，先静下心来读一遍。