AI资讯新闻榜单内容搜索-多模态大模型

关键词: LaVIT,ICLR 2024,DALLE-3,多模态模型

动态视觉分词统一图文表示，快手与北大合作提出基座模型 LaVIT 刷榜多模态理解与生成任务。

关键词: LMM,多模态大模型,M-A-P 开源社区

近期，随着多模态大模型（LMM） 的能力不断进步，评估 LMM 性能的需求也日益增长。与此同时，在中文环境下评估 LMM 的高级知识和推理能力的重要性更加突出。

关键词: 多模态大模型,Vary-toy,LVLM,视觉定位,图像描述

一款名为Vary-toy的“年轻人的第一个多模态大模型”来了！模型大小不到2B，消费级显卡可训练，GTX1080ti 8G的老显卡轻松运行。

关键词: 多模态,GPT-4V,Qwen-VL,通义千问

通义千问的图像推理能力，最近有了大幅提升。

关键词: GPT-4V,Qwen-VL,通义千问,多模态大模型,AI视频

多模态大模型将是AI下一个爆点。最近，通义千问VLM模型换新升级，超大杯性能堪比GPT-4V。最最重要的是，还能限时免费用。

关键词: 多模态大模型,零一万物,李开复大模型,Yi-34B,Yi-6B

领跑中英文两大权威榜单，李开复零一万物交出多模态大模型答卷！

关键词: 声音大模型,M2UGen,PCG ARC

能处理音乐的多模态大模型，终于出现了！

关键词: Agent,UCLA,3D多模态交互具身智能大模型,多模态大模型

Sam Altman认为AGI很快就会降临，但若是没有感官兼备的AI何以称为智能？最近，UCLA等机构研究人员提出多模态具身智能大模型MultiPLY，AI可以知冷知热、辨音识物。

关键词: GPT-4V,LLaVA,多模态模型

多模态大模型GPT-4V也会「有眼无珠」。UC San Diego纽约大学研究人员提出全新V*视觉搜索算法逆转LLM弱视觉宿命。

关键词: LLM,马毅,LeCun,谢赛宁

来自纽约大学和UC伯克利的研究团队成功捕捉到了多模态大模型在视觉理解方面存在的重大缺陷。针对这个问题，他们进一步提出了一个将DINOv2特征与CLIP特征结合的方法，有效地提升了多模态大模型的视觉功能。