TopOpenSourceAI
EN

#13 · 主分类： AI数据基础设施与存储

lance

apache-arrow computer-vision data-analysis data-analytics data-centric data-format data-science dataops deep-learning duckdb embeddings llms machine-learning mlops python rust

面向多模态AI的开放湖仓格式。两行代码即可从Parquet转换，实现100倍更快的随机访问、向量索引和数据版本控制。兼容Pandas、DuckDB、Polars、Pyarrow和PyTorch，更多集成即将推出。

项目最后更新：08/29/26

在 GitHub 查看 访问官网

GitHub Stars

7.0K

Forks数量

826

贡献者数量

269

许可证

Apache-2.0

收录理由

处理非结构化数据时，团队往往要同时维护向量库、图像存储和关系表，拼接成本很高。Lance 把这些统一进一个列式格式，让向量检索、BM25 全文搜索和普通 SQL 分析都能在同一份数据上完成。它原生对接 pandas、DuckDB、Polars 和 PyArrow，熟悉 Python 生态的开发者无需切换工具链。随机访问速度快，新增列可以直接回填历史值而不用重写整个表，每次变更都通过 ACID 事务自动版本化，这让特征工程和训练数据集的复现变得轻量而可靠。

相关文章

暂无针对该项目的文章。

如需补充新闻资讯、使用教程、应用测评等内容，欢迎 联系我们推荐选题或投稿。

同类热门项目

ClickHouse

ClickHouse® 是一个实时分析数据库管理系统

#1

simdjson

每秒解析数GB的JSON：被Facebook/Meta Velox、Node.js运行时、ClickHouse、WatermelonDB、Apache Doris、Milvus、StarRocks使用

#2

gun

开源网络安全协议，用于同步去中心化图数据。

#3

emqx

为AI、IoT、IIoT和联网车辆提供最可扩展且可靠的MQTT broker

#4

server

MariaDB服务器是MySQL服务器的社区开发分支。由原MySQL团队核心成员发起，MariaDB积极与外部开发者合作，提供业界功能最丰富、稳定且许可合理的开源SQL服务器。

#5