12 月 19 日，智源研究院发布最新一期大模型综合及专项评测结果。在覆盖国内外 100 余个开源和商业闭源大模型的评测中，豆包通用模型 pro 获得大语言模型主观评测最高分；在多模态模型评测中，豆包视觉理解模型排名视觉语言模型第二，成绩仅次于 GPT-4o；豆包文生图模型、豆包视频生成模型（即梦 P2.0 pro）也分别在相应测试中获得全球第二。
|
|
据智源研究院介绍，大模型评测平台 FlagEval 联合了全国 10 余家高校和机构合作共建。此次公布的榜单中，大语言模型主观评测重点考察的是模型的中文能力，多模态模型评测榜单中，视觉语言模型主要考察的是模型在图文理解、长尾视觉知识、文字识别以及复杂图文数据分析能力。FlagEval 大模型角斗场则是向用户开放的模型对战评测服务，反映了用户对模型的偏好。
在大语言模型主观评测中，豆包通用模型 pro 的知识运用和推理能力均获得最高分，简单理解、数学能力、安全等项目也排名前三，最终综合成绩排名第一。在 FlagEval 大模型角斗场榜单中，基于模型对战的用户投票结果，豆包通用模型 pro 得分排名第二，仅次于 OpenAI 的 o1-mini。
在多模态模型评测榜单中，GPT-4o 在视觉语言模型中排名第一，豆包视觉理解模型获第二。在中文的通用知识、文字识别中，豆包表现突出，相比国外模型有较大优势。在文生图测试中，混元和豆包排名前两位；在文生视频测试中，国产模型更是优势显著，可灵 1.5 高品质版、即梦 P2.0 pro、爱诗科技 PixVerse v3 和海螺 AI 排名前列。
据悉，豆包视觉理解模型在不久前的火山引擎 Force 大会上首次发布，现已对企业客户开放使用。火山引擎方面表示，豆包大模型通过算法、工程、软硬件结合的技术创新，大幅优化使用成本，让每一家企业都能用得起，推动 AI 技术普惠和应用发展。
广告声明：文内含有的对外跳转链接（包括不限于超链接、二维码、口令等形式），用于传递更多信息，节省甄选时间，结果仅供参考，IT之家所有文章均包含本声明。