最强的GPT-4V都考不过？基于大学考试的测试基准MMMU诞生了

AIGC动态欢迎阅读

原标题：最强的GPT-4V都考不过？基于大学考试的测试基准MMMU诞生了

关键字：解读,模型,基准,错误,问题

文章来源：机器之心

内容字数：8986字

内容摘要：机器之心报道编辑：Panda目前最好的大型多模态模型 GPT-4V 与大学生谁更强？我们还不知道，但近日一个新的基准数据集 MMMU 以及基于其的基准测试或许能给我们提供一点线索，如下排行榜所示。看起来，GPT-4V 在一些科目上已经强过挂科的大学生了。当然这个数据集的创造目的并不为了击败大学生，而是为了提供一个兼具深度与广度的多模态 AI 测试基准，助力人工智能系统的开发，尤其是通用人工智能（Artificial General Intelligence，AGI）。随着大型语言模型（LLM）快速发展，人们对 AGI 这一颇具争议的概念进行了广泛讨论。简单来说，AGI 是指在大多数任务上都与人类相当或超越人类的人工智能系统。由于缺乏公认的可操作定义，人们一直都很难就 AGI 开展更加坦诚和建设性的讨论。为了解决这个问题，Morris 等人的论文《Levels of AGI: Operati…

原文链接：点此阅读原文：最强的GPT-4V都考不过？基于大学考试的测试基准MMMU诞生了

联系作者

文章来源：机器之心

作者微信：almosthuman2014

作者简介：专业的人工智能媒体和产业服务平台