#75 · 主分类: LLM应用框架
docetl
一个用于智能体驱动的LLM数据处理和ETL的系统
项目最后更新:08/10/26
GitHub Stars
4.1K
Forks数量
438
贡献者数量
29
许可证
MIT
收录理由
DocETL面向那些需要在大规模、杂乱的真实数据上运行LLM处理流程,却不想手动串联数千次模型调用的团队。用户可以用自然语言描述每个操作,比如“从工单中提取所有投诉”,工具会负责算子、编排以及跨数据集的并行化。其优化器是突出亮点:它能够自动切换模型、改写提示词、拆解复杂操作,并在可行时用普通代码替换子任务,从而提升准确性并降低成本。处理结果以可查询的表格形式返回,方便接入现有的数据库或分析体系。数据工程师既可以使用Python API,也可以使用低代码的YAML接口,还有可视化界面用于构建和检查流水线。
相关文章
暂无针对该项目的文章。
如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。
同类热门项目
langchain
智能体工程平台。
dify
在一个协作工作区中构建Agentic工作流、RAG管道,支持丰富的AI模型和工具。可部署在云、VPC或自托管环境,团队无需重建技术栈即可从原型走向生产。
headroom
压缩工具输出、日志、文件和RAG块,再送入LLM。编码代理减少20% token,JSON减少60-95% token,答案不变。提供库、代理、MCP服务器。
litellm
最快的、最轻量的AI网关。Rust核心,Python SDK。以OpenAI(或原生)格式调用100多种LLM API,具备成本追踪、护栏、负载均衡和日志记录 [Bedrock, Azure, OpenAI, Anthropic, OpenAI, VertexAI, vLLM, Nvidia NIM]
llama_index
LlamaIndex 是领先的文档代理和 OCR 平台