MMLU

MMLU官网

MMLU 全称 Massive Multitask Language Understanding，是一种针对大模型的语言理解能力的测评，是目前最著名的大模型语义理解测评之一，由UC Berkeley大学的研究人员在2020年9月推出。
网站服务：MMLU，AI工具集导航。
The current state-of-the-art on MMLU is GPT-4 (few-shot， k=5). See a full comparison of 77 papers with code.

MMLU 全称 Massive Multitask Language Understanding，是一种针对大模型的语言理解能力的测评，是目前最著名的大模型语义理解测评之一，由UC Berkeley大学的研究人员在2020年9月推出。该测试涵盖57项任务，包括初等数学、美国历史、计算机科学、法律等。任务涵盖的知识很广泛，语言是英文，用以评测大模型基本的知识覆盖范围和理解能力。

MMLU网址入口

https://paperswithcode.com/sota/multi-task-language-understanding-on-mmlu

小编发现MMLU网站非常受用户欢迎，请访问MMLU网址入口试用。