MMLU官网
MMLU 全称 Massive Multitask Language Understanding,是一种针对大模型的语言理解能力的测评,是目前最著名的大模型语义理解测评之一,由UC Berkeley大学的研究人员在2020年9月推出。
网站服务:MMLU,AI工具集导航。
The current state-of-the-art on MMLU is GPT-4 (few-shot, k=5). See a full comparison of 77 papers with code.
MMLU 全称 Massive Multitask Language Understanding,是一种针对大模型的语言理解能力的测评,是目前最著名的大模型语义理解测评之一,由UC Berkeley大学的研究人员在2020年9月推出。该测试涵盖57项任务,包括初等数学、美国历史、计算机科学、法律等。任务涵盖的知识很广泛,语言是英文,用以评测大模型基本的知识覆盖范围和理解能力。
MMLU网址入口
https://paperswithcode.com/sota/multi-task-language-understanding-on-mmlu
OpenI小编发现MMLU网站非常受用户欢迎,请访问MMLU网址入口试用。
数据统计
数据评估
关于MMLU特别声明
本站OpenI提供的MMLU都来源于网络,不保证外部链接的准确性和完整性,同时,对于该外部链接的指向,不由OpenI实际控制,在2023年 11月 10日 上午6:00收录时,该网页上的内容,都属于合规合法,后期网页的内容如出现违规,可以直接联系网站管理员进行删除,OpenI不承担任何责任。
相关导航
暂无评论...