#27 · 主分类: MLOps与评测
easy-dataset
一个用于创建LLM微调、RAG和评估数据集的强大工具。
项目最后更新:05/01/26
GitHub Stars
14.9K
Forks数量
1.5K
贡献者数量
37
许可证
Other
收录理由
手工拼凑微调或RAG数据集的人都知道,真正的功夫全在文档解析、文本切块和问答对编写上。Easy Dataset把这条流水线整个收进一个带引导的桌面与网页应用里:丢进PDF、Markdown、DOCX或EPUB文件,它用几种切分策略处理,再由LLM接口生成问题、答案和思维链内容,你可以在导出前逐条审阅和清洗。输出覆盖单轮、多轮和图像问答格式,支持Alpaca、ShareGPT和JSONL导出,还能一键配置LLaMA Factory并直传Hugging Face。若想验证数据,内置评测模块能把文档转成测试集,自动跑分的同时还提供双盲人工对战。对想用可视化、低代码方式从原始领域文档走到可用训练与评测数据的小团队来说,这是个很实在的选择。
相关文章
暂无针对该项目的文章。
如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。
同类热门项目
unsloth
本地UI,用于运行和训练LLM及扩散模型。支持GGUF、MLX、Qwen3.8、Kimi K3、MiniMax-H3、Gemma 4、FLUX等。
LlamaFactory
统一高效微调100+大语言模型与视觉语言模型(ACL 2024)
airflow
Apache Airflow - 一个以编程方式编写、调度和监控工作流的平台
langfuse
🪢 开源AI工程平台:LLM评估、可观测性、指标、提示管理、游乐场、数据集。与OpenTelemetry、LangChain、OpenAI SDK、LiteLLM等集成。🍊YC W23
netron
神经网络、深度学习和机器学习模型的可视化工具