智东西8月2日消息,今日,中文多模态大模型SuperCLUE-V基准8月榜单发布,测评涵盖了国内外最具代表性的12个多模态理解大模型,包含4个海外模型和8个国内代表性多模态模型,评估内容包含基础能力和应用能力,以开放式问题对多模态大模型进行评估。腾讯混元大模型在多模态基础能力和应用能力方面获得总分71.95的高分,斩获国内大模型排名第一,稳居卓越领导者象限。
据SuperCLUE官方介绍,评估标准涵盖了理解准确性、回应相关性和推理深度等维度,打分规则结合了自动化定量评分与专家复核,以确保评估的科学性和公正性。评测结果显示,国内大模型在多模态理解的基础能力方面,已经逼近海外顶尖模型,其中腾讯混元大模型总成绩仅略低于GPT-4o,表现好于CLaude3.5-Sonnet和Gemini-1.5-Pro。