jiant

收录理由

对于需要开展多任务学习和迁移学习实验的研究人员与研究生而言，jiant 是一个相当实用的工具包。它采用配置文件驱动的方式，内置了对超过 50 项自然语言理解任务的支持，并预置了 GLUE、SuperGLUE、XTREME 等常用基准测试集。你可以加载预训练的 transformer 模型，挑选若干个任务，观察它们如何联合训练或相互迁移，整个过程具备良好的可复现性。由于构建在 PyTorch 以及 Hugging Face 的 transformers 和 datasets 库之上，它能够自然地融入当前主流的 NLP 技术栈。需要坦诚指出的是，该项目已经停止积极维护，因此更适合作为一份成熟且文档详尽的研究工作流参考，而非生产环境的依赖基础。