Anthropic Haiku 4.5 en ARC-AGI-1 Evaluación Semi Privada Haiku 4.5: 14.33%, $0.03/tarea - Pensando 1K: 16.8%, $0.03/tarea - Pensando 8K: 25.5%, $0.07/tarea - Pensando 16K: 37.3%, $0.10/tarea - Pensando 32K: 47.6%, $0.26/tarea
Anthropic Haiku 4.5 en ARC-AGI-2 Evaluación Semi Privada Haiku 4.5: 1.25%, $0.04/tarea - Pensando 1K: 1.2%, $0.05/tarea - Pensando 8K: 1.7%, $0.09/tarea - Pensando 16K: 2.8%, $0.14/tarea - Pensando 32K: 4.0%, $0.38/tarea
- Tabla de clasificación: - Reproducir los resultados: - Política de pruebas: - Resultados de datos públicos:
27,59K