Benchmarks / Math

MATH Level 5 (Epoch AI)

The hardest tier (level 5) of the MATH competition set, run by Epoch AI. Accuracy. Data: Epoch AI, CC BY.

61models
–Open Index weight
–last updated
epoch-taskspublisher

MATH Level 5 (Epoch AI)

Higher is better · best effort per model

Chart settings
61 of 61 selected

full table below

#ModelEffortScoreCost / taskHarness
1GPT-5high98.1%–Epoch AI
2GPT-5 Minihigh97.8%–Epoch AI
3o4 minihigh97.8%–Epoch AI
4o3high97.8%–Epoch AI
5Sonnet 4.5high97.7%–Epoch AI
6Qwen 3 Maxmax97.1%–Epoch AI
7DeepSeek R1xhigh96.6%–Epoch AI
8o3 minihigh96.5%–Epoch AI
9Haiku 4.5xhigh96.4%–Epoch AI
10Gemini 2.5 Prohigh95.9%–Epoch AI
11GPT-5 Nanomedium95.2%–Epoch AI
12o1high94.7%–Epoch AI
13Grok 3 Minilow90.9%–Epoch AI
14o1 minihigh89.2%–Epoch AI
15Grok 3none88.7%–Epoch AI
16GPT-4.1 Minihigh87.3%–Epoch AI
17Opus 4medium85.0%–Epoch AI
18Sonnet 4high84.4%–Epoch AI
19Gemini 2.0 Pronone83.5%–Epoch AI
20GPT-4.1high83.0%–Epoch AI
21Gemini 2.0 Flashmedium82.2%–Epoch AI
22Mistral Medium 3none81.6%–Epoch AI
23GPT-4.5none78.6%–Epoch AI
24DeepSeek V3none75.5%–Epoch AI
25Gemma 3 27Bnone74.0%–Epoch AI
26Llama 4 Maverickmedium73.0%–Epoch AI
27Gemini 1.5 Pronone70.4%–Epoch AI
28GPT-4.1 Nanohigh70.0%–Epoch AI
29Qwen 3high68.9%–Epoch AI
30Sonnet 3.7medium68.2%–Epoch AI
31Qwen 2.5 Maxnone67.2%–Epoch AI
32Grok 2none63.5%–Epoch AI
33Qwen 2.5 72Bnone63.2%–Epoch AI
34Llama 4 Scoutmedium62.3%–Epoch AI
35Qwen 2.5 32Bnone56.1%–Epoch AI
36GPT-4o minihigh52.6%–Epoch AI
37Mistral Large 2none50.3%–Epoch AI
38GPT-4ohigh49.8%–Epoch AI
39Llama 3.1 405bnone49.8%–Epoch AI
40Mistral Small 3.1none46.8%–Epoch AI
41GPT-4high46.7%–Epoch AI
42Mistral Small 3none44.8%–Epoch AI
43Llama 3.3 70bnone41.6%–Epoch AI
44Llama 3.2 90bnone39.4%–Epoch AI
45Qwen 2 72Bnone39.1%–Epoch AI
46Opus 3none37.5%–Epoch AI
47Llama 3.1 70bnone36.7%–Epoch AI
48Gemma 2 27B–27.9%–Epoch AI
49Gemini 1.5 Flashnone25.1%–Epoch AI
50Mistral Largenone24.5%–Epoch AI
51Llama 3.1 8bmedium22.9%–Epoch AI
52Llama 3 70bnone22.7%–Epoch AI
53Gemma 2 9B–21.0%–Epoch AI
54Sonnet 3none18.2%–Epoch AI
55Haiku 3medium14.9%–Epoch AI
56GPT-3.5high11.6%–Epoch AI
57Gemini 1.0 Pronone11.2%–Epoch AI
58Mixtral 8x7B Instructnone9.3%–Epoch AI
59Llama 3 8bnone6.1%–Epoch AI
60Mistralnone3.6%–Epoch AI
61Llama 2 70bnone3.3%–Epoch AI