RREDPAPA
용어 목록으로 돌아가기
ADV-033능력 측정형

MMLU

Massive Multitask Language Understanding

학습 난이도

여러 분야 지식을 평가하는 대표적인 AI 벤치마크.

한 문장으로 이해하기

MMLU는 역사·수학·법학 등 여러 분야의 객관식 문제로 모델의 폭넓은 지식을 평가하는 대표 벤치마크입니다.

이렇게 떠올리세요

여러 과목을 한 번에 보는 종합 학력고사와 같습니다.

실제 예시

모델 소개에서 'MMLU 90%'는 다지선다 지식 시험 점수를 뜻합니다.

핵심 한 문장

MMLU는 여러 분야 지식을 두루 재는 시험입니다.

위 문장을 보지 않고 자기 말로 다시 설명해보면 오래 기억에 남습니다.

헷갈리는 용어

같이 보면 좋은 용어