#77 · 主分类: 自然语言处理与文本处理

detoxify

bert bert-model hate-speech hate-speech-detection hatespeech huggingface huggingface-transformers kaggle-competition nlp pytorch-lightning sentence-classification toxic-comment-classification toxic-comments toxicity toxicity-classification

用于预测所有3个Jigsaw有毒评论挑战赛中有毒评论的已训练模型和代码。使用⚡Pytorch Lightning和🤗Transformers构建。如需访问我们的API,请发送邮件至[email protected]

项目最后更新:07/06/26

GitHub Stars

1.3K

Forks数量

144

贡献者数量

14

许可证

Apache-2.0

收录理由

运营评论区、论坛或社交信息流时,团队常常需要在短时间内判断哪些帖子值得人工介入。Detoxify 为此提供了现成的基线:它基于 Jigsaw 有毒评论挑战赛的三套数据集训练模型,覆盖了这些竞赛所关注的标准类别。从 Python 中调用推理非常直接,轻量级的 ALBERT 变体也让它在速度或内存受限的场景下容易落地。如果你的内容涉及多语言,或者希望减少模型偏见,项目也提供了对应的权重;代码库本身支持继续微调,方便按需适配。对内容审核来说,这是一个实用的即插即用过滤器;同时,它也是用 PyTorch Lightning 和 Transformers 组织句子分类项目的干净范例,值得参考。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。

同类热门项目