#151 · 主分类: MLOps与评测
t2v_metrics
使用VQAScore评估文本到图像/视频/3D模型
项目最后更新:06/05/26
GitHub Stars
600
Forks数量
76
贡献者数量
7
许可证
Apache-2.0
收录理由
生成一张图、一段视频或一个3D场景后,判断它是否真的贴合提示词,往往是整个工作流里最耗时的一环。这个库把这件事压缩成一行Python代码,核心是VQAScore方法:让视觉语言模型对“画面与文本是否匹配”回答一个是否类问题,得到的分数比传统的CLIP相似度更贴近人工判断。批量评估时只需几行脚本,后端选择也灵活,既可以用Qwen、Gemma这类开放权重模型,也能接GPT、Gemini等托管服务。仓库还附带GenAI-Bench和CameraBench两套基准,省去自己搭建评测环境的功夫,直接有对照参考点。对于反复调试模型版本的研究者,或者在做生成式视觉系统评估的团队,这套工具能明显减少重复劳动,让注意力集中在改进模型本身。
相关文章
暂无针对该项目的文章。
如需补充新闻资讯、使用教程、应用测评等内容,欢迎 联系我们推荐选题或投稿。
同类热门项目
unsloth
本地UI,用于运行和训练LLM及扩散模型。支持GGUF、MLX、Qwen3.8、Kimi K3、MiniMax-H3、Gemma 4、FLUX等。
LlamaFactory
统一高效微调100+大语言模型与视觉语言模型(ACL 2024)
airflow
Apache Airflow - 一个以编程方式编写、调度和监控工作流的平台
langfuse
🪢 开源AI工程平台:LLM评估、可观测性、指标、提示管理、游乐场、数据集。与OpenTelemetry、LangChain、OpenAI SDK、LiteLLM等集成。🍊YC W23
netron
神经网络、深度学习和机器学习模型的可视化工具