Benchmark Heatmap

Compare models across all benchmark scores at a glance. Colors are normalized per column (red = low, green = high).

Top

Sort by

Model	AgMoBench	AgMo Trust	AgMo Pred.	Reasoning	Coding	Math	Agentic	Robust.	AA Intel.	AA Coding	AA Math	MMLU Pro	GPQA	HLE	LiveCode	SciCode	MATH-500	AIME	AIME 25	IFBench	LCR	TB Hard	τ²-Bench	Exploitbench	Cl Bench	Gdp Pdf	Cl Bench L…	Frontierswe	Gbaeval	Rli	Algotune	Ale Bench	GDPval-AA …	Forecastbe…	Critpt	Vending Be…	HMMT Nov 2…	IFEval	LiveCodeBe…	Vectara Fa…	SimpleQA V…	Adversaria…	BALROG	BIG-Bench …	BoolQ	CAD-Eval	CyBench	DeepResear…	FictionLiv…	GeoBench	SWE-Bench …	SEAL Tool …	LongBench …	GDPval	Chatbot Ar…	Epoch Capa…	Hle	Open LLM: …	RE-Bench	SimpleQA	Frontiercode	GSO	METR Time …	VPCT	WebDev Arena	LiveBench …	MMLU	LAMBADA	GAIA	Cursorbench	Scicode	MT-Bench	Aider Poly…	tau-bench …	tau-bench …	Chess Puzz…	TruthfulQA	NoLiMa (NI…	OTIS Mock …	OSWorld (E…	Training C…	Parameter …	OpenBookQA	WebArena	Training C…	SWE-bench …	ARC-AGI-2	Open LLM: …	Open LLM: …	Open LLM: …	AA-Omnisci…	BullshitBe…	MMMU	Video-MME	BrowseComp	PRBench Fi…	MCP Atlas	OSWorld 2.…	Propensity…	Arena ELO:…	FORTRESS	PRBench Le…	MASK	MultiChall…	IFBench (M…	EnigmaEval	Surface Ev…	MMMU-Pro	AIME 2026	Blueprint …	Spatialviz…	Proofbench	Btf3	Open LLM: …	DeepSWE (E…	Enigma Eval	OmniDocBen…	MMTU Table…	IDP OmniDoc	CyberGym	IDP Core	OCRBench v2	Finance Ag…	CharXiv Re…	CharXiv Re…	HLE (with …	MedQA (USM…	Open LLM: …	Video-MME …	Video-MME …	MLE-bench …	PIQA	LiveBench …	ARC-AGI-1	TriviaQA	WinoGrande	BFCL (Berk…	EQ-Bench 3	HuggingFac…	HuggingFac…	AA-Omnisci…	BRUMO 2025	WildBench	Vectara Ha…	Aider Poly…	GAIA Level 1	Chatbot Ar…	Codeforces…	CritPt	GSM8K	HMMT Feb 2…	HumanEval	MathVision	MRCR v2	SWE-bench …	Tau-Bench …	USAMO 2025	Video-MMU	AA Intelli…	AA Long Co…	IDP OlmOCR	SimpleBench	BigCodeBen…	AIME 2024	BigCodeBen…	AIME 2025 …	AIME 2026	MathVista	Arena-Hard…	GPQA Diamo…	Mirrorcode	LiveBench …	LiveBench …	OpenRouter…	LiveBench …	Mystery Ga…	LiveBench …	ARC-AGI-1 …	ARC-AGI-2 …	AlpacaEval…	FrontierMath	AlpacaEval…	LegalBench	LiveBench …	OpenRouter…	HLE (Matrix)	IMO 2025	MATH-500 (…	MathArena …	SciCode (M…	Terminal-B…	BigCodeBench	CMIMC 2025	MMLU-Pro (…	MMMU-Pro	SMT 2025	Terminal-B…	GSM8K (Epo…	HellaSwag	Lech Mazur…	ScienceQA	The Agent …	Video-MME …	Apex Agents	Arc Agi 2	GAIA Level 3	GAIA Level 2	Gdpval	Posttrainb…	Open LLM A…	LongBench …	Arena ELO:…	SWE-bench …	BIRD-bench	Cybench	ChemBench	DABStep	Open Finan…	LongBench v2	IDP Overall	SWE-Bench …	OSWorld (U…	AA-Omnisci…	WeirdML	Arena Elo …	τ²-Bench	Browsecomp	Simpleqa	LCR	AIME	Arena Elo …	Terminal-B…	Arena Elo …	Arena Elo …	IFBench	LiveCodeBe…	Arena Elo …	GPQA Diamond	HLE	SciCode
Gemini 3 Pro Preview (high)	86.7	86.4	86.7	89.6	85.6	75.1	96.7	85.5	40.6	—	95.7	89.8	90.8	39.7	91.7	56.1	—	—	95.7	70.4	73.0	41.7	87.1	—	—	—	—	—	—	—	—	—	—	—	—	—	93.3	90.0	79.7	86.4	0.7	—	—	—	—	—	—	—	—	0.0	—	—	—	—	1485.0	153.2	0.4	—	92.9	72.1	—	0.2	54.1	0.9	9824.0	73.4	91.8	—	—	—	—	—	—	—	88.5	0.3	—	—	0.9	—	—	—	—	—	—	69.6	54.0	—	—	—	—	48.0	87.5	—	85.9	—	—	—	—	1438.0	—	—	—	—	—	—	—	81.0	91.7	—	—	—	—	—	—	—	90.2	—	88.8	—	81.8	—	—	—	—	—	96.0	—	—	—	64.4	—	77.4	75.0	—	—	72.5	—	—	—	55.9	98.3	—	13.6	—	—	1501.0	2512.0	9.1	—	97.5	93.0	—	77.0	43.3	99.3	—	87.6	—	—	77.7	76.4	—	97.0	—	95.0	—	—	—	91.9	—	84.6	—	141000000000.0	81.8	—	74.4	0.5	30.6	—	19.0	—	87.0	74.6	20.0	37.5	—	97.3	23.4	56.1	56.9	—	90.0	89.8	81.0	93.4	—	—	—	—	—	—	—	3.0	0.3	—	—	0.5	0.0	—	—	1485.0	—	—	—	—	—	—	—	82.8	—	55.0	—	—	—	87.1	85.9	72.1	73.0	—	—	—	1289.0	—	70.4	91.7	1433.0	90.8	39.7	56.1
Claude Opus 4.6 (Non-reasoning, High Effort)	80.4	80.4	80.4	75.4	87.3	83.2	70.4	91.3	38.8	—	—	—	84.0	19.1	—	45.7	—	—	—	44.6	62.3	48.5	84.8	—	—	—	—	—	—	—	—	571.3	1606.0	—	—	—	—	94.0	76.0	87.8	0.4	—	—	—	—	—	0.9	—	—	—	51.9	—	—	—	1497.0	155.2	0.2	—	100.0	72.0	—	0.3	69.9	—	1542.7	—	90.8	—	—	—	—	7.9	—	—	91.9	0.2	—	—	0.9	—	—	—	—	7.1	—	75.6	68.8	—	—	—	13.5	87.0	76.5	—	84.0	53.3	76.8	—	—	1537.0	13.0	52.3	96.3	—	—	—	—	73.9	96.7	—	—	—	—	—	—	0.1	—	—	85.9	73.8	81.1	—	60.1	69.1	84.7	53.3	95.4	—	—	—	63.1	—	—	93.0	—	—	—	1383.0	—	—	45.1	—	—	12.2	—	—	1502.0	2650.0	12.6	—	15.9	95.0	—	93.0	55.6	98.2	—	—	53.0	—	74.1	67.6	—	75.5	—	100.0	—	—	59.7	91.3	—	—	—	430000000000.0	—	0.1	—	1.9	3.6	17.0	38.3	27.3	85.3	—	18.0	40.0	—	93.0	—	—	62.9	—	—	82.0	77.3	—	39.0	—	—	—	—	—	—	3.4	0.7	—	—	—	0.2	—	—	1472.0	—	70.2	93.0	—	94.4	—	—	80.4	47.1	72.7	—	65.9	—	84.8	84.0	72.0	62.3	—	—	—	1293.0	—	44.6	—	1510.0	84.0	19.1	45.7
Gemini 3.1 Pro Preview	80.2	80.8	80.2	96.8	87.5	91.4	—	85.2	47.7	68.8	—	—	94.1	47.0	—	58.9	—	—	—	77.1	79.0	53.8	95.6	3.2	0.2	0.2	0.2	11.0	1.0	—	2.0	465.1	—	1.0	0.2	911.2	—	89.2	82.0	89.6	0.8	—	0.0	—	—	—	—	—	—	—	46.1	—	—	—	1486.0	154.8	0.5	—	—	72.1	0.1	0.2	89.8	—	1446.5	79.9	92.6	—	—	—	0.6	—	—	—	90.5	0.6	—	—	1.0	—	—	—	—	—	—	80.6	77.1	—	—	—	32.9	37.0	87.5	—	85.9	—	78.2	—	—	1447.0	—	—	—	71.4	—	36.8	—	80.5	98.3	0.3	—	0.3	—	—	81.4	0.2	—	—	85.3	—	89.6	—	59.7	—	—	51.4	96.4	—	—	—	—	—	84.0	98.0	—	—	—	1302.0	—	—	55.3	—	—	10.4	—	—	1490.0	2700.0	17.7	—	—	95.0	69.8	84.9	54.2	—	—	—	57.0	—	69.8	79.6	—	98.0	—	100.0	97.0	—	—	94.3	0.1	85.4	79.1	369000000000.0	91.0	0.3	78.5	0.5	1.0	—	36.9	—	87.4	76.5	23.0	44.4	—	98.5	33.5	58.9	68.5	—	—	89.5	80.5	—	—	—	—	—	—	—	—	3.3	0.8	—	—	—	0.2	—	—	1490.0	—	—	—	—	—	—	—	81.6	32.2	72.0	49.9	72.1	—	95.6	85.9	72.1	79.0	—	—	—	1277.0	—	77.1	—	1445.0	94.1	47.0	58.9
GPT-5.2 (xhigh)	79.2	80.7	79.2	81.8	84.0	97.4	71.7	64.4	43.3	—	99.0	87.4	90.3	37.7	88.9	52.1	—	—	99.0	75.4	79.3	47.0	84.8	—	—	—	—	—	—	—	—	—	—	—	—	—	95.8	95.0	80.0	89.2	0.4	—	0.0	—	—	—	—	0.5	1.0	0.0	—	—	—	—	1436.0	153.5	0.3	—	81.7	58.0	—	0.1	38.3	0.8	1641.0	48.9	88.0	—	—	—	—	—	0.1	—	88.0	0.5	—	—	1.0	—	—	—	—	—	—	69.0	72.9	—	—	—	-1.0	38.0	86.7	—	77.9	—	—	—	34.4	1418.0	—	—	—	—	—	—	—	79.5	98.3	—	—	0.1	—	—	—	—	—	—	88.0	—	77.4	—	—	—	—	—	94.1	—	—	—	—	—	42.8	94.5	—	—	55.9	1314.0	—	—	43.8	98.3	—	10.8	—	—	1440.0	2800.0	11.6	—	99.4	95.0	—	70.0	55.6	98.7	—	90.5	70.0	75.7	79.1	45.8	—	100.0	—	100.0	—	—	—	93.2	—	50.0	—	165000000000.0	58.3	—	47.7	11.4	39.0	—	40.7	—	82.8	76.5	9.0	35.2	—	99.4	13.5	54.6	54.0	—	91.3	86.7	86.5	92.0	—	—	—	8.7	—	—	—	3.5	0.5	—	—	0.4	0.0	—	—	1391.0	—	—	—	—	—	—	—	81.5	23.8	38.2	—	72.2	—	84.8	77.9	58.0	79.3	—	—	—	1229.0	—	75.4	88.9	1400.0	90.3	37.7	52.1
Gemini 3 Flash Preview (Reasoning)	76.7	79.3	76.7	88.0	83.6	88.6	69.4	50.3	38.7	—	97.0	89.0	89.8	36.6	90.8	50.6	—	—	97.0	78.0	73.0	38.6	80.4	—	—	0.1	—	—	—	—	—	388.6	—	1.0	—	3634.7	93.3	88.2	90.8	86.5	0.7	—	0.0	—	—	—	—	—	—	0.0	—	—	—	—	1473.0	151.7	—	—	—	—	—	0.1	—	0.7	3053.0	72.4	91.8	—	—	—	—	—	—	—	82.0	0.4	—	—	0.9	—	—	—	—	—	—	75.8	33.6	—	—	—	—	10.0	87.6	—	—	—	—	—	—	1438.0	—	—	—	—	—	—	—	—	96.7	0.0	—	0.1	—	—	—	—	—	—	90.1	—	80.5	—	—	—	—	—	—	—	—	—	62.7	—	74.5	84.7	—	—	—	—	—	—	—	100.0	—	13.5	—	—	1473.0	2100.0	—	—	—	—	—	—	34.6	—	—	86.9	—	—	75.3	61.1	—	93.0	—	90.4	—	—	—	90.4	—	84.6	—	885000000000.0	84.2	—	74.8	0.2	0.2	—	35.6	—	—	73.9	6.0	33.7	—	—	15.6	—	51.7	—	90.6	88.6	81.2	92.9	—	—	—	—	—	—	—	3.3	0.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	82.0	—	50.0	—	61.6	—	80.4	75.0	60.0	73.0	—	—	—	1271.0	—	78.0	90.8	1413.0	89.8	36.6	50.6
Claude Opus 4.5 (Reasoning)	75.9	76.1	75.9	85.6	88.7	62.4	73.7	96.6	41.9	—	91.3	89.5	86.6	30.1	87.1	49.5	—	—	91.3	58.0	76.0	47.0	89.5	—	0.2	—	—	—	—	0.0	1.8	560.9	—	1.0	—	4967.1	—	90.0	68.0	89.1	0.4	—	0.0	—	—	—	0.8	—	—	0.0	45.9	—	—	—	1473.0	149.9	0.1	—	97.8	72.0	—	0.3	49.4	0.4	4468.0	76.0	90.8	—	—	—	—	—	—	—	88.9	0.1	—	—	0.8	66.3	—	—	—	—	—	74.4	37.6	—	—	—	—	90.0	80.7	—	67.8	—	—	—	—	1494.0	9.6	—	92.5	—	—	—	—	73.9	—	—	—	0.4	—	—	—	0.1	—	—	—	—	—	—	—	—	—	—	95.9	—	—	—	—	—	—	80.0	—	—	77.5	1308.0	—	—	40.7	—	—	10.9	—	—	1468.0	2070.0	0.3	—	92.9	95.1	—	—	45.9	98.2	—	68.4	—	75.0	—	62.0	—	90.0	—	92.8	—	—	59.7	87.0	—	—	—	157000000000.0	—	0.2	—	1.5	2.4	—	20.3	—	84.6	—	14.0	37.6	—	85.0	—	—	57.8	—	—	80.0	—	—	39.0	—	—	—	—	—	—	3.2	0.1	—	—	0.6	0.2	—	—	—	—	—	82.0	—	—	—	—	—	—	66.3	—	63.7	—	89.5	67.8	72.0	76.0	—	—	—	—	—	58.0	87.1	1462.0	86.6	30.1	49.5
Claude Sonnet 4.6 (Non-reasoning, High Effort)	72.8	72.1	72.8	67.7	86.6	83.8	—	89.4	36.8	—	—	—	79.9	13.3	—	46.9	—	—	—	41.2	62.3	46.2	79.5	3.2	—	—	—	—	—	—	—	—	1633.0	—	—	—	—	92.0	74.0	89.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	1472.0	152.4	—	—	—	—	—	—	—	—	1510.6	—	90.0	—	—	—	—	—	—	—	89.0	—	—	—	—	72.1	—	—	—	—	—	79.6	60.4	—	—	—	12.4	91.0	74.2	—	—	—	69.4	—	—	1524.0	—	—	—	—	—	—	—	74.5	—	—	—	—	—	—	—	—	—	—	86.9	—	81.2	—	—	—	—	—	92.1	—	—	—	—	—	—	86.5	—	—	—	1384.0	—	—	40.0	—	—	10.6	—	—	—	2010.0	—	—	—	93.0	—	82.0	48.2	97.0	—	—	51.0	—	73.9	—	—	—	—	97.0	—	—	—	74.1	—	—	—	782000000000.0	—	0.1	—	1.2	2.7	—	35.0	—	82.1	—	17.0	38.0	—	96.5	—	—	59.1	—	—	80.0	74.5	—	—	—	—	—	—	—	—	—	—	—	—	—	0.2	—	—	1442.0	—	—	—	—	—	—	—	80.7	—	72.5	—	66.1	—	79.5	78.0	68.0	62.3	—	—	—	1275.0	—	41.2	—	1483.0	79.9	13.3	46.9
Claude Opus 4.6 (Adaptive Reasoning, Max Effort)	72.6	74.1	72.6	87.8	82.5	87.7	89.0	52.1	44.9	—	—	—	89.6	39.9	—	51.9	—	—	—	53.1	74.3	46.2	92.1	—	—	—	—	—	—	—	—	—	1606.0	—	—	—	—	89.7	47.4	87.8	0.4	—	—	—	0.6	—	0.9	—	—	—	—	—	—	—	1502.0	143.7	0.3	—	100.0	—	—	0.3	69.9	—	1542.7	—	90.8	—	—	—	—	7.9	—	—	91.9	0.1	—	—	0.9	—	—	—	—	—	—	75.6	68.8	—	—	—	13.5	34.0	76.5	—	—	—	75.8	—	—	1548.0	13.0	—	—	—	—	—	—	—	—	—	—	0.5	—	—	—	0.1	—	—	—	—	—	—	—	—	—	—	—	—	—	—	63.1	—	—	93.0	—	—	—	—	—	—	45.1	—	—	12.2	—	—	1502.0	1886.0	0.3	—	15.9	95.0	—	93.0	35.8	98.2	—	—	53.0	—	—	67.6	—	75.5	—	100.0	—	—	59.7	91.3	—	—	—	1020000000000.0	—	0.3	—	1.9	3.6	17.0	40.7	27.3	85.3	—	11.0	7.1	—	94.4	—	—	43.2	—	—	86.6	77.3	—	39.0	5.0	0.0	—	—	—	—	3.4	0.7	—	—	—	0.0	—	—	—	—	—	—	—	—	—	—	—	—	38.2	—	78.0	—	92.1	84.0	22.8	74.3	—	—	—	—	—	53.1	—	—	89.6	39.9	51.9
GPT-5 (high)	71.5	75.2	71.5	76.4	87.9	88.2	32.2	58.4	35.3	37.8	94.3	87.1	85.4	28.5	84.6	42.9	99.4	95.7	94.3	73.1	76.3	32.6	84.8	—	—	—	—	—	—	—	1.7	515.9	—	—	0.1	—	89.2	90.0	84.5	84.9	0.5	—	—	—	—	—	—	0.5	—	—	—	—	—	—	1434.0	150.0	0.3	—	95.7	—	—	—	38.3	0.7	—	60.0	91.0	—	—	—	—	—	0.1	—	—	0.4	—	—	0.9	—	—	—	—	—	—	65.0	9.9	—	—	—	—	21.0	74.4	—	—	51.3	—	—	—	—	—	49.0	—	63.2	—	—	—	62.7	—	—	—	0.2	—	—	—	—	—	69.6	—	—	—	80.7	—	—	—	—	96.3	—	—	—	39.6	—	63.1	65.7	—	—	—	1586.0	—	—	40.6	91.7	—	15.1	88.0	—	1460.0	2537.0	5.7	—	88.3	94.0	—	—	41.8	97.0	—	—	68.0	75.6	—	56.7	—	94.6	—	94.6	—	—	—	88.4	—	70.0	—	—	72.4	0.2	48.0	0.5	0.7	—	32.4	—	86.0	78.6	—	35.2	38.1	99.4	1.0	—	35.2	—	90.0	87.0	—	92.0	41.3	—	—	—	—	—	—	3.0	0.1	—	—	—	—	—	—	1375.0	—	—	—	—	57.7	—	—	—	—	40.0	—	60.7	—	84.8	54.9	55.0	76.3	95.7	—	—	1213.0	—	73.1	84.6	—	85.4	28.5	42.9
Claude Opus 4.5 (Non-reasoning)	70.9	70.3	70.9	76.0	82.7	51.8	73.7	96.6	35.6	—	62.7	88.9	81.0	13.2	73.8	47.0	—	—	62.7	43.0	67.3	40.9	86.3	—	0.2	—	—	—	—	0.0	1.8	560.9	—	1.0	—	4967.1	—	90.0	68.0	89.1	0.4	—	0.0	—	—	—	0.8	—	—	0.0	45.9	—	—	—	1473.0	149.6	0.1	—	97.8	72.0	—	0.3	49.4	0.4	4468.0	76.0	90.8	—	—	—	—	—	—	—	88.9	0.1	—	—	0.8	66.3	—	—	—	—	—	74.4	37.6	—	—	—	—	90.0	80.7	—	67.8	—	—	—	—	1494.0	13.6	—	—	—	—	—	—	73.9	—	—	—	0.4	—	—	—	0.1	—	—	—	—	—	—	—	—	—	—	93.2	—	—	—	—	—	—	80.0	—	—	77.5	1308.0	—	—	45.7	—	—	10.9	—	—	1468.0	2070.0	0.3	—	92.9	95.1	—	—	45.9	98.2	—	68.4	—	75.0	—	62.0	—	90.0	—	92.8	—	—	59.7	87.0	—	—	—	161000000000.0	—	—	—	1.5	2.4	—	21.0	—	82.8	—	29.0	37.6	—	85.0	—	—	57.8	—	—	80.0	—	—	39.0	—	—	—	—	—	—	3.1	0.1	—	—	0.6	0.2	—	—	1468.0	—	—	82.0	—	98.9	—	—	—	23.4	66.3	—	63.7	—	86.3	67.8	72.0	67.3	—	—	—	—	—	43.0	73.8	1461.0	81.0	13.2	47.0
Gemini 3 Pro Preview (low)	70.6	69.9	70.6	80.8	88.8	82.2	96.0	—	33.9	—	86.7	89.5	88.7	29.5	85.7	49.9	—	—	86.7	49.7	70.3	34.1	68.1	—	0.2	—	—	—	—	0.0	1.8	471.1	—	1.0	0.1	5478.2	—	—	—	86.4	0.7	—	0.1	—	—	—	—	—	—	0.0	—	—	—	—	—	—	0.4	—	—	—	—	0.2	54.1	0.9	9824.0	73.4	—	—	—	—	—	—	—	—	—	0.3	—	—	0.9	—	—	—	—	—	—	69.6	31.1	—	—	—	—	48.0	—	—	—	—	70.8	—	—	—	—	—	—	65.7	—	18.2	—	—	—	—	—	0.2	—	—	—	0.2	—	—	—	—	—	—	—	—	—	—	—	—	—	—	64.4	—	77.4	75.0	—	—	72.5	1307.0	—	—	47.1	—	—	13.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	76.4	—	—	—	—	—	—	—	—	—	84.6	—	139000000000.0	81.8	—	74.4	0.5	0.8	—	37.6	—	—	74.6	17.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	3.4	0.3	—	—	0.5	0.1	—	—	—	—	—	—	—	—	—	—	—	17.9	—	—	69.9	—	68.1	—	—	70.3	—	—	—	—	—	49.7	85.7	—	88.7	29.5	49.9
Gemini 3 Flash Preview (Non-reasoning)	69.9	71.2	69.9	75.1	78.0	59.3	69.4	58.2	27.9	—	55.7	88.2	81.2	15.0	79.7	49.9	—	—	55.7	55.1	53.0	31.8	43.3	—	—	—	—	—	—	—	—	—	—	—	—	—	93.3	88.2	90.8	86.5	0.7	—	0.0	—	—	—	—	—	—	0.0	—	—	—	—	1473.0	150.6	—	—	—	60.0	—	0.1	—	0.7	3053.0	72.4	91.8	—	—	—	—	—	—	—	82.0	0.4	—	—	0.9	—	—	—	—	—	—	75.8	33.6	—	—	—	11.6	10.0	87.6	—	75.0	—	—	—	—	1438.0	—	—	—	—	—	—	—	—	96.7	—	—	—	—	—	—	—	90.4	—	90.1	—	80.5	—	—	—	—	—	95.8	—	—	—	62.7	—	74.5	84.7	—	—	—	—	—	—	45.5	100.0	—	13.5	—	—	1473.0	2100.0	—	—	—	—	—	—	34.6	—	—	86.9	—	—	75.3	61.1	—	93.0	—	90.4	—	—	—	90.4	—	84.6	—	985000000000.0	84.2	—	74.8	0.2	0.2	—	30.0	—	86.9	73.9	2.0	33.7	—	—	15.6	—	51.7	—	90.6	88.6	81.2	92.9	—	—	—	—	—	—	—	3.3	0.0	—	—	—	—	—	—	1459.0	—	—	—	—	—	—	—	82.0	—	50.0	—	—	—	43.3	75.0	60.0	53.0	—	—	—	1269.0	—	55.1	79.7	1413.0	81.2	15.0	49.9
GPT-5.2 (medium)	69.7	71.1	69.7	74.0	85.3	92.4	71.7	59.4	38.9	—	96.7	85.9	86.4	26.7	89.4	46.2	—	—	96.7	65.2	69.0	43.2	74.3	—	—	—	—	—	—	0.0	2.0	447.1	—	—	—	—	95.8	95.0	80.0	89.2	0.3	—	0.0	—	—	—	—	0.5	1.0	0.0	—	—	—	—	1482.0	153.8	0.3	—	81.7	58.0	—	0.1	38.3	0.6	1641.0	48.9	88.0	—	—	—	—	—	0.1	—	88.0	0.4	—	—	0.9	—	—	—	—	—	—	65.0	26.7	—	—	—	-1.0	27.0	86.7	—	77.9	—	—	—	—	1472.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	42.8	72.7	—	—	55.9	—	—	—	43.8	98.3	—	10.8	—	—	1440.0	2800.0	11.6	—	99.4	95.0	—	70.0	55.6	98.7	—	90.5	70.0	75.7	—	45.8	—	100.0	—	100.0	—	—	—	93.2	—	50.0	—	193000000000.0	58.3	—	47.7	0.3	0.8	—	36.9	—	—	76.5	16.0	35.2	—	99.4	13.5	54.6	54.0	—	91.3	86.7	86.5	92.0	—	—	—	8.7	—	—	—	3.5	0.3	—	—	0.4	0.2	—	—	—	—	—	—	—	—	—	—	—	—	38.2	—	60.7	—	74.3	77.9	58.0	69.0	—	—	—	—	—	65.2	89.4	—	86.4	26.7	46.2
Claude Opus 5 (Adaptive Reasoning, Max Effort)	68.5	68.8	68.5	97.1	98.8	—	—	94.3	63.1	78.0	—	—	93.2	54.9	—	55.7	—	—	—	—	75.7	—	—	—	—	0.2	—	—	—	—	—	—	—	—	0.3	—	—	—	—	—	0.6	—	—	—	0.6	—	—	—	—	—	—	—	—	—	1489.0	161.0	—	—	—	—	0.5	—	—	—	1691.8	—	—	—	—	0.7	0.6	—	—	—	—	0.4	—	—	1.0	—	—	—	—	—	—	—	90.4	—	—	—	37.1	73.0	—	—	—	—	—	—	—	1691.0	—	—	—	—	—	—	—	—	—	—	—	0.8	—	—	99.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	91.2	97.5	—	—	—	—	—	—	60.9	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	88.7	63.8	1570000000000.0	95.7	0.6	74.6	0.7	2.1	—	—	—	87.0	81.4	40.0	—	—	—	—	—	—	—	—	—	—	—	—	5.0	0.0	—	—	—	—	3.6	0.9	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	60.8	91.8	—	—	—	—	75.7	—	—	—	—	—	—	—	—	93.2	54.9	55.7
Gemini 2.5 Pro	67.4	67.9	67.4	67.6	68.8	67.2	71.7	54.4	25.9	33.3	87.7	86.2	84.4	22.5	80.1	42.8	96.7	88.7	87.7	48.7	66.0	26.5	54.1	—	—	—	—	—	—	0.0	1.5	646.6	—	1.0	0.0	573.6	66.7	90.8	70.4	93.0	0.6	—	0.0	—	—	1.4	—	0.3	0.6	0.0	—	68.8	63.3	—	1445.0	145.8	0.2	—	—	52.9	—	0.0	—	0.4	3505.0	58.3	89.8	—	55.1	—	0.4	—	0.0	—	—	0.2	—	—	0.8	—	—	—	—	—	—	53.6	4.9	—	—	—	—	20.0	84.0	—	—	—	—	—	—	1225.0	—	—	—	—	52.3	—	—	—	—	—	—	—	—	—	—	0.0	88.0	66.5	—	—	—	86.2	—	—	—	—	93.1	—	—	—	59.6	—	70.8	37.0	—	—	—	1259.0	—	—	39.0	90.0	—	7.0	83.1	71.7	1437.0	2001.0	2.0	—	82.5	—	—	83.1	—	—	24.0	84.8	70.0	—	—	51.6	—	92.0	—	86.7	—	—	90.8	84.0	—	75.5	—	—	68.3	—	51.6	0.5	0.8	—	10.3	—	84.3	75.7	—	18.8	31.6	97.3	0.5	—	32.6	—	58.1	85.6	—	84.9	25.3	—	—	8.1	—	4.2	—	1.9	0.0	38.5	50.0	0.3	—	—	—	1447.0	51.7	—	—	—	12.7	—	—	—	—	—	—	54.0	—	54.1	—	52.9	66.0	88.7	—	—	1246.0	1142.0	48.7	80.1	1421.0	84.4	22.5	42.8
GPT-5.4 (xhigh)	67.2	68.3	67.2	93.0	79.4	—	—	69.6	53.1	71.1	—	—	92.0	43.7	—	56.6	—	—	—	73.9	77.7	57.6	87.1	—	0.3	—	0.2	—	—	—	—	—	—	—	0.2	—	—	—	—	93.0	0.5	—	—	—	—	—	—	—	—	—	59.1	—	—	83.0	1466.0	156.1	0.4	—	—	—	—	0.3	53.9	—	—	80.3	—	—	—	—	0.6	—	—	—	—	0.4	—	—	0.9	—	—	—	—	—	—	—	74.0	—	—	—	5.7	48.0	—	—	—	—	70.6	—	—	1390.0	—	—	—	—	—	16.0	—	81.2	99.2	—	—	0.6	—	—	70.5	0.2	—	—	85.3	66.3	84.4	—	—	—	—	—	96.1	—	—	—	—	—	88.1	93.7	—	—	—	1328.0	—	—	50.0	—	—	7.0	—	—	—	—	—	—	—	—	—	—	57.7	—	—	—	—	—	81.0	—	—	—	—	—	—	—	—	—	—	82.6	70.2	327000000000.0	94.1	0.4	79.3	0.6	1.5	—	47.6	—	86.0	77.5	37.0	—	—	—	—	—	75.1	—	—	—	—	—	—	—	—	—	—	—	—	3.4	0.7	—	—	—	0.0	—	—	1431.0	—	—	—	—	—	—	—	83.5	43.4	75.0	—	57.4	—	87.1	—	—	77.7	—	—	—	1278.0	—	73.9	—	1470.0	92.0	43.7	56.6
Kimi K3	66.7	67.2	66.7	93.7	99.4	—	—	88.6	59.7	76.2	—	—	93.5	46.9	—	58.7	—	—	—	—	82.7	—	—	—	—	0.2	—	—	92.0	—	—	328.4	—	—	0.2	5165.0	—	—	—	—	0.4	—	—	—	—	—	—	—	—	—	—	—	—	—	1489.0	157.0	—	—	—	—	0.4	—	—	—	1669.2	—	—	—	—	—	0.6	—	—	—	—	0.4	—	—	1.0	—	—	—	—	—	—	—	55.0	—	—	—	19.7	73.0	—	—	—	—	82.3	—	—	1674.0	—	—	—	—	—	—	0.9	—	96.7	0.3	—	0.7	—	—	97.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	90.7	86.7	—	—	—	—	1558876.0	48.0	47.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	85.5	71.4	1440000000000.0	84.4	0.3	78.7	0.5	0.9	—	—	—	86.0	81.4	6.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	3.3	0.6	—	—	—	0.3	—	—	—	—	—	—	—	—	—	—	—	—	—	53.2	82.6	—	—	—	—	82.7	—	—	—	—	—	—	—	—	93.5	46.9	58.7
Claude Fable 5 (Adaptive Reasoning, Max Effort, Opus 4.8 Fallback)	66.3	66.7	66.3	92.6	98.1	—	—	89.8	62.1	76.5	—	—	92.6	55.5	—	60.2	—	—	—	63.5	76.7	62.9	98.5	—	—	—	—	—	—	0.2	—	—	—	—	—	4529.9	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	1506.0	161.5	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	76.8	—	—	—	43.3	54.0	—	—	—	53.9	83.3	—	—	1627.0	—	52.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	89.7	90.5	—	—	—	—	—	—	65.3	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	90.7	75.8	—	96.0	—	80.5	0.5	1.4	—	—	—	88.6	86.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	3.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	63.6	87.8	—	98.5	—	—	76.7	—	—	—	1315.0	1237.0	63.5	—	1504.0	92.6	55.5	60.2
Claude 4.5 Sonnet (Reasoning)	66.2	66.2	66.2	74.2	72.2	66.5	65.1	81.5	37.4	52.1	88.0	87.5	83.4	17.8	71.4	44.7	—	—	88.0	57.3	68.3	35.6	78.1	—	—	—	—	—	—	0.0	1.5	663.5	—	0.9	0.0	3838.7	—	88.5	68.0	88.0	0.1	—	—	—	—	—	0.6	0.5	—	—	—	—	—	—	1456.0	146.8	0.1	—	—	—	—	0.1	—	0.4	—	68.2	86.5	—	—	—	0.5	7.9	—	—	86.2	0.1	—	—	0.4	42.9	—	—	—	7.1	—	70.6	13.6	—	—	—	—	79.0	77.8	—	—	—	—	—	—	1392.0	12.8	—	96.1	—	—	—	—	68.9	—	—	—	0.2	—	—	—	0.1	—	—	—	—	—	—	—	—	—	—	94.7	—	—	—	—	—	77.6	63.7	—	—	73.2	1293.0	—	—	—	90.8	—	12.0	—	—	—	1480.0	—	—	79.2	85.0	—	10.8	43.6	98.0	—	—	—	—	—	54.3	—	88.0	—	87.0	—	—	—	83.4	—	76.5	—	—	79.3	0.2	57.0	0.5	0.8	17.0	13.5	27.3	84.1	80.4	—	19.8	—	95.8	1.6	—	42.8	—	66.9	87.5	63.4	84.0	51.0	—	—	—	—	—	—	—	0.0	—	—	0.5	0.1	—	—	—	—	66.8	60.0	—	—	—	—	—	—	61.4	—	47.7	—	78.1	—	47.0	68.3	—	—	—	—	—	57.3	71.4	1446.0	83.4	17.8	44.7
Claude Opus 4.8 (Adaptive Reasoning, Max Effort)	65.7	65.2	65.7	88.1	93.6	—	—	97.9	57.3	74.3	—	—	92.0	48.7	—	53.5	—	—	—	62.2	73.0	58.3	94.4	—	—	0.2	—	—	—	—	—	—	—	—	0.2	2992.3	—	—	—	—	0.4	—	—	—	—	—	—	—	—	—	—	—	—	—	1474.0	157.9	—	—	—	—	—	—	—	—	—	—	—	—	—	0.6	0.5	—	—	—	—	0.3	—	—	1.0	—	—	—	—	—	—	—	72.1	—	—	—	28.8	95.0	—	—	—	—	82.2	500.0	—	1539.0	—	—	—	—	—	—	—	—	100.0	—	—	0.7	—	—	120.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	89.2	92.5	—	—	—	—	—	—	48.8	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	64.8	—	—	—	—	—	—	—	—	—	79.7	72.0	558000000000.0	94.3	0.4	66.0	2.3	2.7	—	47.2	—	83.6	81.8	61.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	3.5	—	—	—	—	0.3	—	—	—	—	—	—	—	—	—	—	—	—	—	39.3	82.9	—	94.4	—	—	73.0	—	—	—	1280.0	1205.0	62.2	—	1469.0	92.0	48.7	53.5
GPT-5.6 Sol (max)	65.4	66.7	65.4	96.9	99.2	—	—	79.0	60.9	77.4	—	—	94.1	49.5	—	56.1	—	—	—	72.7	77.7	65.9	85.1	—	—	—	—	—	—	—	—	98.3	—	—	0.3	—	—	—	—	—	0.7	—	—	—	—	—	—	—	—	—	—	—	—	—	—	161.7	—	—	—	—	—	—	—	—	—	—	—	—	—	0.7	0.6	—	—	—	—	0.6	—	—	1.0	—	—	—	—	—	—	—	92.5	—	—	—	22.0	47.0	—	—	—	—	—	—	—	—	—	50.5	—	—	—	—	—	—	—	—	—	0.8	—	—	61.3	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	91.7	96.5	—	—	—	—	—	—	59.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	87.7	71.8	695000000000.0	96.2	0.6	79.8	0.5	1.4	—	—	—	87.0	83.9	39.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	3.3	0.9	—	—	—	0.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	88.8	—	85.1	—	—	77.7	—	—	—	—	—	72.7	—	—	94.1	49.5	56.1
GPT-5.3 Codex (xhigh)	65.3	67.3	65.3	93.4	83.9	83.2	—	56.0	45.5	—	—	—	91.5	42.5	—	53.2	—	—	—	75.4	78.3	53.0	86.0	—	—	—	—	—	—	—	—	260.9	—	—	—	5940.1	—	92.0	85.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	155.7	—	—	79.4	—	—	—	54.7	—	1394.6	72.8	94.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	56.8	—	—	—	—	9.9	24.0	84.0	—	—	—	—	—	—	1409.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	80.2	—	—	—	—	—	—	—	51.8	—	—	—	—	—	—	—	—	99.0	—	93.0	—	—	56.8	—	—	—	—	—	—	—	—	—	—	94.0	—	—	—	81.0	—	80.1	—	—	87.8	—	62.7	—	—	—	—	—	—	78.2	—	—	—	96.0	—	—	64.7	—	—	—	—	—	—	—	—	—	—	—	—	3.3	—	—	—	—	0.1	—	—	—	—	—	—	—	—	—	—	—	—	64.7	—	77.9	—	86.0	—	—	78.3	—	—	—	—	—	75.4	—	—	91.5	42.5	53.2
Claude Sonnet 4.6 (Non-reasoning, Low Effort)	65.0	64.0	65.0	65.0	83.7	83.8	—	89.4	35.1	—	—	—	79.7	11.2	—	44.1	—	—	—	42.4	64.7	42.4	78.9	—	—	—	—	—	—	—	—	—	1633.0	—	—	—	—	92.0	74.0	89.4	0.3	—	—	—	—	—	—	—	—	—	—	—	—	—	—	153.0	—	—	—	68.0	—	—	—	—	1510.6	—	90.0	—	—	—	—	—	—	—	89.0	0.1	—	—	0.9	—	—	—	—	—	—	79.6	60.4	—	—	—	12.4	91.0	74.2	—	78.0	—	—	—	—	1521.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	86.5	—	—	—	—	—	—	40.0	—	—	10.6	—	—	—	2010.0	—	—	—	93.0	—	82.0	48.2	97.0	—	—	51.0	—	—	—	—	—	—	97.0	—	—	—	74.1	—	—	—	972000000000.0	—	—	—	1.2	2.7	—	35.0	—	—	—	22.0	38.0	—	96.5	—	—	59.1	—	—	80.0	74.5	—	—	—	—	—	—	—	—	—	0.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	72.5	—	—	—	78.9	78.0	68.0	64.7	—	—	—	—	—	42.4	—	—	79.7	11.2	44.1
Claude Opus 4.7 (Non-reasoning, High Effort)	63.9	64.6	63.9	78.5	81.8	84.3	—	69.3	43.9	—	—	—	94.2	46.9	—	50.1	—	—	—	43.6	72.3	54.5	74.0	3.5	—	0.2	—	4.7	68.0	—	1.3	397.4	—	1.0	0.1	10936.8	—	89.7	47.4	88.0	0.5	—	—	—	—	—	0.4	0.5	0.6	0.0	—	—	—	—	1502.0	155.8	0.4	—	—	—	0.4	0.4	20.4	0.3	1552.8	—	88.8	—	—	0.5	0.6	—	0.3	—	81.4	0.3	—	—	1.0	—	—	—	—	—	—	87.6	1.3	—	—	—	26.2	83.0	76.5	—	79.3	—	79.1	500.0	—	1558.0	—	—	—	—	—	—	—	—	95.8	0.3	—	0.5	—	—	—	0.1	—	—	—	73.1	—	—	64.4	82.1	91.0	54.7	—	—	—	—	—	—	—	22.5	—	—	—	1461.0	—	—	43.5	—	—	12.0	72.0	—	—	1886.0	0.3	—	15.9	—	—	—	35.8	—	—	—	—	—	—	62.9	—	75.5	—	90.0	—	—	59.7	83.3	0.3	—	—	589000000000.0	—	0.1	—	0.4	0.6	—	43.8	—	85.3	—	70.0	7.1	—	94.4	—	—	43.2	—	—	86.6	—	—	39.0	—	—	8.3	—	—	—	3.5	0.6	—	—	—	0.3	—	—	1494.0	—	—	96.0	—	—	—	—	—	—	38.2	—	75.5	—	74.0	—	22.8	72.3	—	—	69.4	1301.0	1233.0	43.6	—	1498.0	94.2	46.9	50.1
Grok 4.5 (high)	63.4	63.7	63.4	88.5	93.6	—	—	86.2	55.8	72.4	—	—	93.1	42.7	—	54.1	—	—	—	—	74.0	—	—	—	—	0.1	—	—	—	—	—	406.4	—	—	0.1	—	—	—	—	—	0.5	—	—	—	—	—	—	—	—	—	—	—	—	—	1469.0	154.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	0.5	—	—	—	—	0.4	—	—	1.0	—	—	—	—	—	—	—	52.6	—	—	—	25.3	54.0	—	—	—	—	—	—	—	1554.0	—	—	—	—	—	—	0.5	—	—	—	—	0.3	—	—	61.3	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	87.2	85.7	—	—	—	—	—	—	51.5	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	70.0	—	—	—	—	—	—	—	—	—	82.8	71.5	516000000000.0	90.8	—	73.0	0.3	0.8	—	—	—	86.0	68.6	29.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	0.5	—	—	—	0.2	—	—	—	—	—	—	—	—	—	—	—	—	—	54.1	46.4	—	—	—	—	74.0	—	—	—	1285.0	—	—	—	1454.0	93.1	42.7	54.1
Qwen3.5 397B A17B (Reasoning)	63.1	64.7	63.1	87.8	76.1	90.9	—	55.6	34.3	48.2	—	—	89.3	29.0	—	42.0	—	—	—	78.8	72.7	40.9	95.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	92.6	83.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	1442.0	—	—	—	—	—	—	—	—	—	—	—	88.6	—	—	—	—	—	—	—	—	0.1	—	—	0.9	—	—	—	—	—	—	76.4	—	—	—	—	-29.8	78.0	85.0	—	—	—	—	—	—	1400.0	—	—	—	—	76.5	—	—	—	94.2	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	1263.0	—	—	—	—	—	—	—	—	—	2200.0	—	—	—	92.0	90.3	—	—	—	—	—	—	—	—	—	—	94.0	—	95.0	91.3	—	—	88.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	32.0	—	98.0	—	—	—	—	—	87.8	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	1412.0	—	—	—	—	—	—	—	—	—	—	—	—	—	95.6	—	35.0	72.7	—	—	—	1247.0	—	78.8	—	—	89.3	29.0	42.0
GPT-5.5 (xhigh)	62.9	63.9	62.9	95.7	90.8	—	—	78.5	56.3	74.9	—	—	93.5	45.8	—	56.1	—	—	—	75.9	79.0	60.6	93.9	—	—	0.3	—	—	—	—	—	174.5	—	—	0.3	—	—	—	—	90.7	—	—	—	—	—	—	—	—	—	—	—	—	—	—	1477.0	159.2	—	—	—	—	—	0.4	—	—	1494.7	—	—	—	—	0.6	0.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	85.0	—	—	—	20.1	47.0	—	—	—	—	75.3	500.0	—	1509.0	—	—	—	—	—	—	—	—	100.0	—	—	0.5	—	—	82.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	89.7	95.0	—	—	—	1328.0	—	—	56.9	—	—	9.3	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	69.0	—	—	—	—	—	—	—	—	—	87.4	70.7	1050000000000.0	95.9	0.6	81.6	0.7	1.9	—	—	—	86.5	82.1	10.0	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	3.6	0.8	—	—	—	0.3	—	—	1430.0	—	—	—	—	—	—	—	—	—	—	—	83.9	—	93.9	—	—	79.0	—	—	—	1286.0	—	75.9	—	1480.0	93.5	45.8	56.1
Qwen3.7 Max	62.6	63.1	62.6	93.6	87.4	—	—	84.0	46.7	66.0	—	—	92.3	40.5	—	48.8	—	—	—	80.5	74.7	50.8	94.7	—	—	—	—	—	92.0	—	—	462.9	—	—	0.1	—	—	—	—	—	0.6	—	—	—	—	—	—	—	—	—	—	—	—	—	1474.0	153.8	—	—	—	—	—	—	—	—	1524.7	—	—	—	—	—	0.5	—	—	—	—	0.2	—	—	1.0	—	—	—	—	—	—	—	—	—	—	—	13.5	71.0	—	—	—	—	—	—	—	1517.0	—	—	—	—	—	—	—	—	—	—	—	0.3	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	83.3	—	—	—	—	—	—	—	31.1	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	70.4	—	—	—	—	—	—	—	—	—	79.7	74.0	—	85.2	0.3	71.8	—	—	—	—	—	84.9	74.2	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	25.6	—	—	94.7	—	—	74.7	—	—	—	—	—	80.5	—	—	92.3	40.5	48.8
Qwen3.5 397B A17B (Non-reasoning)	62.5	63.9	62.5	77.0	84.0	90.9	—	55.6	32.7	—	—	—	86.1	19.8	—	41.1	—	—	—	51.6	62.0	35.6	83.9	—	—	—	—	—	—	—	—	—	—	—	—	—	—	92.6	83.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	35.0	—	—	—	—	—	—	88.6	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	76.4	—	—	—	—	-29.8	78.0	85.0	—	—	—	—	—	—	—	—	—	—	—	76.5	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	2200.0	—	—	—	92.0	90.3	—	—	—	—	—	—	—	—	—	—	94.0	—	95.0	91.3	—	—	88.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	32.0	—	98.0	—	—	—	—	—	87.8	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	83.9	—	35.0	62.0	—	—	—	—	—	51.6	—	—	86.1	19.8	41.1
Kimi K2.5 (Reasoning)	62.4	63.5	62.4	80.7	79.7	83.5	—	61.5	36.0	46.8	—	—	87.9	30.7	—	49.0	—	—	—	70.2	73.0	34.8	95.9	—	0.2	—	0.1	11.7	—	—	—	635.5	—	—	0.0	1198.5	89.2	90.0	85.0	85.8	—	—	—	—	—	—	—	—	0.9	—	—	—	—	—	1450.0	148.1	0.2	2.7	—	45.0	0.0	—	—	—	1423.9	69.1	92.0	—	—	0.3	0.5	—	—	—	—	—	—	—	—	63.3	—	—	—	—	—	70.8	11.8	22.5	27.7	49.7	-8.1	52.0	84.0	—	74.9	—	—	—	—	1436.0	—	—	—	—	—	—	—	—	95.8	—	—	—	—	30.0	—	0.0	1.0	—	—	—	—	—	—	—	—	—	94.4	39.8	—	—	—	—	76.0	65.3	—	—	—	1303.0	406888.0	37.0	—	98.3	—	14.2	—	—	—	2350.0	—	—	95.4	95.0	84.2	—	—	—	—	86.6	—	—	—	46.8	—	96.1	—	96.0	—	—	—	87.6	—	77.7	—	302000000000.0	84.9	—	61.4	0.1	0.3	—	28.0	—	—	77.9	18.0	50.2	—	98.0	8.8	—	43.2	—	91.3	87.1	78.5	90.6	—	—	—	—	—	—	—	2.5	0.1	—	—	—	0.1	14.6	—	1415.0	—	—	—	—	—	—	—	—	—	62.0	—	45.6	—	95.9	74.9	45.0	73.0	—	—	—	1249.0	—	70.2	—	1429.0	87.9	30.7	49.0

Low

High(normalized per column)Predicted