#25 · 主分类: 基础模型

CodeGen

codex generativemodel languagemodel llm programsynthesis tpu-acceleration

CodeGen是一系列用于程序合成的开源模型。在TPU-v4上训练。与OpenAI Codex竞争。

项目最后更新:06/02/26

GitHub Stars

5.2K

Forks数量

422

贡献者数量

11

许可证

Apache-2.0

收录理由

CodeGen 是 Salesforce AI Research 推出的开源程序合成模型系列,从最初的 CodeGen1 一路迭代到 CodeGen2 与 CodeGen2.5,提供了 350M 到 16B 多种参数规模的检查点。它能把自然语言描述直接转换成可运行的代码,这让开发者可以在本地环境里尝试程序合成,而不必依赖封闭的 API 服务。CodeGen2 引入了填充中间内容的 infill 生成能力,而 7B 的 CodeGen2.5 据 Salesforce 报告性能超过 16B 参数模型,不同尺寸的选择也方便你根据手头 GPU 的显存来灵活部署。所有检查点都能通过 Hugging Face transformers 接口用几行 Python 代码直接加载,自托管非常省事。需要提醒的是,这属于研究性质的软件而非受支持的产品,实际用到生产环境前,务必花时间在自己的任务上验证输出质量。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。

同类热门项目