Anthropic Haiku 4.5 auf ARC-AGI-1 Semi Private Eval Haiku 4.5: 14,33 %, 0,03 $/Aufgabe - Denken 1K: 16,8 %, 0,03 $/Aufgabe - Denken 8K: 25,5 %, 0,07 $/Aufgabe - Denken 16K: 37,3 %, 0,10 $/Aufgabe - Denken 32K: 47,6 %, 0,26 $/Aufgabe
Anthropic Haiku 4.5 auf ARC-AGI-2 Semi Private Eval Haiku 4.5: 1,25 %, 0,04 $/Aufgabe - Denken 1K: 1,2 %, 0,05 $/Aufgabe - Denken 8K: 1,7 %, 0,09 $/Aufgabe - Denken 16K: 2,8 %, 0,14 $/Aufgabe - Denken 32K: 4,0 %, 0,38 $/Aufgabe
- Rangliste: - Ergebnisse reproduzieren: - Testpolitik: - Öffentliche Daten Ergebnisse:
27,59K