#169 · 主分类: MLOps与评测

bert_score

machine-learning natural-language-processing

用于文本生成的 BERT 评分

项目最后更新:07/30/24

GitHub Stars

1.9K

Forks数量

240

贡献者数量

22

许可证

MIT

收录理由

BERTScore 通过预训练上下文嵌入与余弦相似度来比对候选文本和参考文本,能够捕捉到 ROUGE 或 BLEU 这类基于词重叠的指标所遗漏的语义信息。它输出精确率、召回率和 F1 值,而非一个笼统的分数,并且这些分数与人类评价高度相关,在评测摘要生成或翻译模型时,能给出审稿人认可的结果。既可在命令行中批量打分,也能在 Python 流水线里直接调用 BERTScorer 对象,支持约 130 种预训练模型,并附有与人类评价相关性最高的模型建议。对于空字符串或多条参考句等边界情况也处理妥当,接入现有评测流程几乎无需额外配置。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。

同类热门项目