#116 · 主分类: 自然语言处理与文本处理
gector
论文“GECToR – 语法错误纠正:标记而非重写”(BEA-20)和“通过标记进行文本简化”(BEA-21)的官方实现
项目最后更新:05/21/24
GitHub Stars
972
Forks数量
220
贡献者数量
7
许可证
Apache-2.0
收录理由
如果你正在为编辑器或写作工具加入语法检查功能,GECToR 是一个值得深入研究的项目。它提供了论文《GECToR – Grammatical Error Correction: Tag, Not Rewrite》的官方 PyTorch 实现,核心思路是把语法纠错当作序列标注任务:模型并不重写整个句子,而是为每个词元预测一个编辑动作,这种方式让推理开销保持在较低水平,便于在真实产品中大规模部署。仓库里包含了完整的训练流程,以及基于 BERT、RoBERTa、XLNet 的预训练权重,这些模型在 CoNLL-2014 和 BEA-2019 基准上都有不错的得分,你可以直接加载权重做推理,也可以在自己的语料上微调。同一个框架还提供了文本简化(按标签改写)的实现,一套代码覆盖两种编辑任务。数据预处理脚本和两阶段的微调策略,能帮你快速建立一个可靠的基线,在正式押注某个写作辅助系统之前,先用它对比你的数据效果。
相关文章
暂无针对该项目的文章。
如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。