#58 · 主分类: 自然语言处理与文本处理
budoux
javascript
machine-learning
nlp
python
一个紧凑、独立的机器学习换行工具,支持多种语言和HTML输入。
项目最后更新:08/28/26
GitHub Stars
1.8K
Forks数量
45
贡献者数量
16
许可证
Apache-2.0
收录理由
在构建不使用空格分隔的语言界面时,如何决定换行位置是个棘手问题——处理不好,文字就会在词中间断开,影响阅读。BudouX 用机器学习解决了这个痛点,模型连同权重仅约 15 KB,完全独立运行,不依赖云端分词服务,放在客户端也能轻松使用。它自带的预训练模型覆盖日语、简体中文、繁体中文和泰语,同时提供训练脚本,你可以喂入自己的数据集,为其他语言定制模型。项目提供 Python、JavaScript 和 Java 的绑定,解析器还直接支持 HTML 输入,无需先剥离标签就能处理带标记的内容。对于做中日韩或泰语排版开发的团队来说,这比依赖字符宽度估算的旧办法更自然、也更轻量。
相关文章
暂无针对该项目的文章。
如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。