MMLU 全称 Massive Multitask Language Understanding,是一种针对大模型的语言理解能力的测评,是目前最著名的大模型语义理解测评之一,由UC Berkeley大学的研究人员在2020年9月推出。该测试涵盖57项任务,包括初等数学、美国历史、计算机科学、法律等。任务涵盖的知识很广泛,语言是英文,用以评测大模型基本的知识覆盖范围和理解能力。

©️版权声明:若无特殊声明,本站所有文章版权均归AI工具集原创和所有,未经许可,任何个人、媒体、网站、团体不得转载、抄袭或以其他方式复制发表本站内容,或在非我站所属的服务器上建立镜像。否则,我站将依法保留追究相关法律责任的权利。

类似于MMLU的工具

MagicArena
MagicArena

字节推出的视觉生成模型对战平台

CMMLU
CMMLU

一个综合性的大模型中文评估基准

LLMEval3
LLMEval3

由复旦大学NLP实验室推出的大模型评测基准

LMArena
LMArena

AI模型评估平台

Open LLM Leaderboard
Open LLM Leaderboard

Hugging Face推出的开源大模型排行榜单

H2O EvalGPT
H2O EvalGPT

H2O.ai推出的基于Elo评级方法的大模型评估系统

想让 ChatGPT / 豆包 主动推荐你的产品?
GEO(AI搜索优化)—— 让你的品牌进入 AI 大模型的答案。本站日均被 8 家 AI 爬虫抓取 1万+ 次,就是活案例。
了解 GEO 服务 →
©️版权声明:若无特殊声明,本站所有文章版权均归AI智库原创和所有,未经许可,任何个人、媒体、网站、团体不得转载、抄袭或以其他方式复制发表本站内容,或在非我站所属的服务器上建立镜像。否则,我站将依法保留追究相关法律责任的权利。

类似网站

发表评论