#49 · 主分类: 基础模型

Chinese-LLaMA-Alpaca-3

alpaca large-language-models llama llama-2 llama-3 llama3 llm nlp

基于Meta Llama 3开发的中文羊驼大模型三期项目

项目最后更新:04/19/26

GitHub Stars

2.0K

Forks数量

170

贡献者数量

3

许可证

Apache-2.0

收录理由

这套模型基于Meta的Llama-3做了中文适配,既提供基座版本也提供指令微调版本。开发者在原版基础上用大规模中文数据做了增量预训练,再用精选指令数据精调,中文语义理解和指令跟随能力比二代明显提升。项目不仅放出权重,还把预训练脚本、指令精调脚本和所用指令数据都开源了,想复现训练过程或者拿自己的语料继续训练都行。兼容性方面,从笔记本电脑CPU上跑的llama.cpp到生产环境常用的vLLM都能直接使用,生态很完整。做中文应用或者想找个多语言基座做领域微调的团队,拿到手就是能用的发布版本和文档,不用自己从头搭整套流程。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。

同类热门项目