Benchmarks / Cyber

UGI

A private-question suite combining sensitive-topic knowledge with willingness to follow controversial instructions. Maintained by DontPlanToEnd. Score: UGI ๐Ÿ†.

166models
โ€“Open Index weight
โ€“last updated

UGI

Higher is better ยท best effort per model

Chart settings
166 of 166 selected

full table below

#ModelEffortScoreCost / taskHarness
1Grok 4.20xhigh70โ€“โ€“
2Grok 4.0709โ€“68โ€“โ€“
3Grok 3none63โ€“โ€“
4Grok 4.5max62โ€“โ€“
5Grok 4.3xhigh59โ€“โ€“
6Mistral Large 2411โ€“59โ€“โ€“
7DeepSeek V4 Flashmax59โ€“โ€“
8DeepSeek V3none57โ€“โ€“
9Mistral Large 3none57โ€“โ€“
10Kimi K2medium57โ€“โ€“
11Mistral Medium 3none56โ€“โ€“
12DeepSeek V3.0324โ€“55โ€“โ€“
13Opus 5.5max54โ€“โ€“
14DeepSeek V3.2high54โ€“โ€“
15Opus 4.7max54โ€“โ€“
16GPT-6.1 Solmax53โ€“โ€“
17o3high52โ€“โ€“
18Mistral Large 2407โ€“52โ€“โ€“
19Sonnet 4.6max52โ€“โ€“
20Opus 4.6max52โ€“โ€“
21DeepSeek V3.1none51โ€“โ€“
22DeepSeek R1xhigh51โ€“โ€“
23Opus 4.8max51โ€“โ€“
24GPT-5.5xhigh50โ€“โ€“
25Mistral Medium 3.5high50โ€“โ€“
26Llama 7 0bโ€“49โ€“โ€“
27GLM 4.7none49โ€“โ€“
28Gemini 3 Flashhigh49โ€“โ€“
29GPT-6 Astramax49โ€“โ€“
30Mistral Medium 3.1none49โ€“โ€“
31DeepSeek V4 Promax49โ€“โ€“
32GPT-6 Solmax48โ€“โ€“
33Gemini 2.5 Prohigh48โ€“โ€“
34GPT-5.6 Terramax48โ€“โ€“
35GPT-4.1high48โ€“โ€“
36Grok 4.1 Fasthigh47โ€“โ€“
37Gemini 3.6 Flashxhigh47โ€“โ€“
38Llama 3.1 405bnone47โ€“โ€“
39Gemini 2.5 Flashmedium47โ€“โ€“
40GPT-5.4xhigh47โ€“โ€“
41Qwen 2.5 32Bnone47โ€“โ€“
42Gemini 3.8 Flashmax47โ€“โ€“
43Gemini 3.5 Flashxhigh46โ€“โ€“
44Gemini 3.7 Flashmax46โ€“โ€“
45Fable 5max46โ€“โ€“
46Grok 4 Fastnone46โ€“โ€“
47GPT-4ohigh46โ€“โ€“
48Devstral Small 2none45โ€“โ€“
49Hy3xhigh45โ€“โ€“
50GPT-5.6 Solmax45โ€“โ€“
51Magistral Small 2509โ€“44โ€“โ€“
52Fable 5.1max44โ€“โ€“
53Qwen 2.5 72Bnone44โ€“โ€“
54Kimi K2.5max44โ€“โ€“
55Qwen 3 Maxmax44โ€“โ€“
56DeepSeek R1.0528โ€“43โ€“โ€“
57Opus 4.5high43โ€“โ€“
58MiMo V2.5 Proxhigh43โ€“โ€“
59GLM 4.6none43โ€“โ€“
60o1high42โ€“โ€“
61GPT-5high42โ€“โ€“
62GPT-5.2025high42โ€“โ€“
63Llama 4 Maverickmedium41โ€“โ€“
64Mistral Small 3.1none41โ€“โ€“
65Llama 33 70bโ€“41โ€“โ€“
66Mistral Small 3.2none40โ€“โ€“
67Llama 33โ€“40โ€“โ€“
68GLM 5.1max40โ€“โ€“
69Gemma 2 7Bโ€“40โ€“โ€“
70Mistral Smallnone39โ€“โ€“
71Qwen 2.5 14Bโ€“39โ€“โ€“
72Gemini 3.1 Prohigh38โ€“โ€“
73Llama 3.3 70bnone38โ€“โ€“
74Gemma 2 9Bโ€“38โ€“โ€“
75Gemini 3 Prohigh38โ€“โ€“
76Mistral Small 3none37โ€“โ€“
77Llama 3.3none37โ€“โ€“
78Llama 3โ€“37โ€“โ€“
79GLM 4.5xhigh37โ€“โ€“
80Gemma 1 2Bโ€“37โ€“โ€“
81Kimi K2.6max36โ€“โ€“
82Qwen 3high36โ€“โ€“
83o4 minihigh36โ€“โ€“
84Qwen 3 235B-A22Bxhigh35โ€“โ€“
85Qwen 3 4Bnone35โ€“โ€“
86GLM 4.6 Vlow35โ€“โ€“
87MiMo V2.5xhigh35โ€“โ€“
88Mistral Small 2409โ€“35โ€“โ€“
89MiMo V2 Flashhigh34โ€“โ€“
90Grok 4.7max34โ€“โ€“
91Opus 4medium34โ€“โ€“
92GLM 5high34โ€“โ€“
93Qwen 3.1none34โ€“โ€“
94Mistral Small 4high34โ€“โ€“
95Mistralnone33โ€“โ€“
96GLM 4โ€“33โ€“โ€“
97Qwen 3 30B-A3Bnone33โ€“โ€“
98Sonnet 5max33โ€“โ€“
99Gemma 3 12Bnone32โ€“โ€“
100Qwen 3 8Bnone32โ€“โ€“
101Qwen 3 14Bnone31โ€“โ€“
102Magistral 2509โ€“31โ€“โ€“
103GPT-5.6 Lunamax31โ€“โ€“
104Llama 4 Scoutmedium31โ€“โ€“
105Llama 3.1max30โ€“โ€“
106GPT-5.3xhigh30โ€“โ€“
107Llama 3 8bnone30โ€“โ€“
108Sonnet 4.5high29โ€“โ€“
109GLM 5.2max29โ€“โ€“
110GPT-5.2xhigh29โ€“โ€“
111Qwen 3.5 397B-A17Bmax29โ€“โ€“
112Qwen 3.6 27Bmax27โ€“โ€“
113MiniMax M2โ€“27โ€“โ€“
114Llama 3.3 8bโ€“25โ€“โ€“
115Qwen 3 32Bnone25โ€“โ€“
116Gemma 3 4Bnone25โ€“โ€“
117Qwen 2.5 7Bโ€“24โ€“โ€“
118Qwen 3.5 35B-A3Blow23โ€“โ€“
119Gemma 4 31B IThigh23โ€“โ€“
120Qwen 3.6 Plusmax23โ€“โ€“
121Llama 10 9bโ€“22โ€“โ€“
122GLM 4.7 Flashnone21โ€“โ€“
123Gemma 3 12B ITโ€“21โ€“โ€“
124Qwen 3.0โ€“21โ€“โ€“
125Llama 3.1 70bnone21โ€“โ€“
126Gemma 4 26Bxhigh21โ€“โ€“
127Gemma 3 27Bnone20โ€“โ€“
128Gemma 3 27B ITmedium20โ€“โ€“
129Gemma 3 1Bnone20โ€“โ€“
130MiniMax M2.1โ€“20โ€“โ€“
131Grok 4.6max20โ€“โ€“
132gpt-oss-120bhigh20โ€“โ€“
133MiniMax M2.5high18โ€“โ€“
134MiniMax M2.7high18โ€“โ€“
135Qwen 3.5 122B-A10Bnone18โ€“โ€“
136Qwen 3.5 9Blow17โ€“โ€“
137Gemma 3 4B ITโ€“17โ€“โ€“
138Qwen 3.5none17โ€“โ€“
139GPT-5.1high16โ€“โ€“
140GLM 4.5 Airโ€“16โ€“โ€“
141Opus 4.1high16โ€“โ€“
142Qwen 3.6 35B-A3Bmax16โ€“โ€“
143Qwen 3.5 27Bhigh16โ€“โ€“
144Qwen 3 Codermedium15โ€“โ€“
145Qwen 3.5 4Blow15โ€“โ€“
146Qwen 3 15B-A2Bโ€“15โ€“โ€“
147Gemma 4 12B ITโ€“15โ€“โ€“
148Qwen 2.5โ€“15โ€“โ€“
149Gemma 2 27B ITโ€“13โ€“โ€“
150Gemma 3 1B ITโ€“13โ€“โ€“
151Sonnet 4high13โ€“โ€“
152Gemma 2 9B ITโ€“12โ€“โ€“
153Llama 3 3bโ€“11โ€“โ€“
154Qwen 2.5 Codernone10โ€“โ€“
155Qwen 3 16B-A3Bโ€“10โ€“โ€“
156Opus 3none10โ€“โ€“
157Haiku 3medium9โ€“โ€“
158Haiku 4.5xhigh9โ€“โ€“
159gpt-oss-20bhigh9โ€“โ€“
160Llama 3.2 3bnone7โ€“โ€“
161Llama 3.2 1bnone7โ€“โ€“
162Llama 3.2โ€“7โ€“โ€“
163Llama 3.1 8bmedium6โ€“โ€“
164Qwen 3.5 2Blow6โ€“โ€“
165Llama 2 70bnone4โ€“โ€“
166Gemma 2 2B ITโ€“2โ€“โ€“