MMMU(Massive Multi-discipline Multimodal Understanding and Reasoning)는 이미지와 글을 함께 다루는 multimodal 모델의 전문 지식과 추론 능력을 평가하는 benchmark다. 2023년 오하이오 주립대학교와 워털루 대학교 등 여러 대학의 연구자들이 공개했다. 대학 시험과 교과서에서 모은 약 1만 1,500개의 문제로 이루어지며, 예술·디자인, 경영, 과학, 보건·의학, 인문·사회과학, 기술·공학의 6개 분야 30개 과목을 다룬다. 문제에는 도표, 지도, 화학 구조식, 악보 같은 다양한 종류의 이미지가 포함된다.
2024년에 공개된 MMMU-Pro는 MMMU를 더 어렵게 만든 판이다. 이미지를 보지 않고 글만으로 풀 수 있는 문제를 걸러 내고 선택지를 최대 10개로 늘렸으며, 질문과 선택지를 모두 이미지 안에 넣어 모델이 화면을 읽어 풀어야 하는 vision 설정을 추가했다. MMMU-Pro Vision은 이 vision 전용 설정을 가리킨다. MMMU는 GPT, Gemini, Claude 등 주요 multimodal 모델의 성능을 비교하는 대표 benchmark 가운데 하나로 쓰인다.