LLaVA 的替代品

4 个可以替代 LLaVA 的工具,1 个可完全替代、2 个部分替代,1 个在国内不能直接访问、归在最后。费用、登录、平台与可访问性都是本站实测或从官网核对的。

LLaVA
llava-vl.github.io

开源的多模态大模型,用 CLIP 视觉编码器接 Vicuna 语言模型,可围绕图片多轮问答、描述细节并做科学推理,模型、代码和指令数据全部公开,适合多模态研究者复现或微调视觉语言模型。

工具英文开源国内可直接访问

对比

条目费用登录平台国内可直接访问一句
BuboGPT — — 网页 待检测 替代多模态研究这一块:同为开源视觉语言模型,可做图像理解与推理,但多了音频、少了 LLaVA 的指令数据复现生态
Qwen大模型 — — — 待检测 替代视觉问答这一块:Qwen-VL 系列同样开源可微调,中文与文档场景更强,但不是 LLaVA 那套 CLIP+Vicu
MMiniGPT-4 — — — 可以 同为开源视觉语言模型,架构思路相近,代码与权重公开,适合复现和微调研究
Gemini — — — 不可以 替代看图问答这一块:Gemini 原生多模态可直接用,但闭源、不能本地部署和微调

详细介绍

可完全替代 1
部分替代 2
国内不可直接访问 1

还有:InstructBLIP、Qwen2-VL、OpenFlamingo、CogVLM(未收录)

更新于 11 月 8 日 · 报告问题

查看详情 打开官网llava-vl.github.io