KAT Coder Pro v2.5: para qué sirve de verdad (benchmark en español)
Su fuerte es Coding (#30 de 97 entre los que rinden el examen completo), y donde menos rinde es Agentes (6.92 contra 9.18). Cuesta $4.66 por cada 1.000 llamadas.
Dónde está parado, pilar por pilar
La nota de la derecha es sobre 10. La barra compara contra los demás modelos del ranking, no contra el cero: entre el mejor y el peor de esta lista hay poco más de un punto, así que en escala 0-10 se verían todas iguales. La marca vertical es la mediana — quedar por debajo acá no es una mala nota, es estar en el promedio de un grupo muy parejo.
Medido con 262 runs que puntúan, juez Phi-4 local · actualizado 2026-08-23 · datos abiertos
Qué hace bien y qué no
Su media entre las 33 tareas medidas es 7.22. Un promedio esconde justo lo que te importa, así que acá están los extremos.
Donde rinde por encima de sí mismo
- Encontrar el sitio oficial de una empresa — 9.12 (+1.90 contra su media).
- JSON estructurado (extracción, schemas) — 9.04 (+1.82 contra su media).
- Extraer los datos verificables de un texto — 8.98 (+1.76 contra su media).
- OCR / extracción desde imágenes — 8.55 (+1.33 contra su media).
Donde se cae
- Resistencia a prompt injection — 3.90 (-3.32 contra su media).
- Tool calling (llamada de funciones) — 5.10 (-2.12 contra su media).
- Presentaciones (slides, reportes) — 5.12 (-2.10 contra su media).
- No inventar herramientas (abstenerse cuando no hay) — 5.49 (-1.73 contra su media).
Si KAT Coder Pro v2.5 no te cierra
| Modelo | Calidad | $/1k | Latencia | Por qué |
|---|---|---|---|---|
| Ling 3.0 Flash | 7.98 | $0.101 | 12.1 s | misma nota o mejor, menos plata por llamada |
| GPT-5.6 Luna | 8.52 | $0.930 | 10.6 s | hasta 30% más caro, pero rinde más |
| Gemini 3.1 Flash Lite | 8.09 | $2.33 | 4.1 s | al menos 40% menos de espera, sin caer de nota |
La ficha: KAT Coder Pro v2.5 en números
| Calidad medida | |
|---|---|
| Runs que puntúan | 262 |
| Tool calling | 7.88 |
| Resistencia a prompt injection | 3.10 |
| Precio | |
| Precio por millón · entrada | $0.740 |
| Precio por millón · salida | $2.96 |
| Rendimiento y límites | |
| Latencia total media | 15.8 s |
| Ventana de contexto | 256.000 |
Contra los mejores del ranking, en plata
| Modelo | Calidad | $/1.000 llamadas |
|---|---|---|
| KAT Coder Pro v2.5 | 7.83 | $4.66 |
| GPT-5.6 Luna | 8.52 | $0.930 |
| Claude Opus 4.8 | 8.48 | $39.00 |
- GPT-5.6 Luna (el techo medido) rinde 9% más y además es más barato: $0.930 contra $4.66. Acá no hay que elegir.
- Claude Opus 4.8 (el caro que todos conocen) rinde 8% más (8.48 contra 7.83) y cuesta 8 veces más por llamada.
Cuánto max_tokens darle, por tarea
| Tarea | Mediana | Peor caso medido | max_tokens sugerido |
|---|---|---|---|
| Tareas largas (sostener el hilo 8-12 turnos) | 4.096 | 19.019 | 23.773 |
| Decisiones de negocio (prioridades. plan) | 1.136 | 8.192 | 10.240 |
| Contenido startup (newsletter. actualidad) | 5.696 | 8.192 | 10.240 |
| Razonamiento profundo (matemática. Fermi) | 1.874 | 7.267 | 9.083 |
| Razonamiento general (lógica. decisiones) | 3.093 | 7.069 | 8.836 |
| Gestión de tareas (action items. planes) | 2.420 | 6.808 | 8.510 |
| Presentaciones (slides. reportes) | 5.158 | 5.158 | 6.447 |
| Estrategia (pricing. planificación) | 2.361 | 4.684 | 5.855 |
| Noticias + SEO (artículos completos) | 1.622 | 4.288 | 5.360 |
| Contenido genérico (blog. email. social) | 876 | 2.472 | 3.090 |
| Ventas en frío (cold email. campañas) | 778 | 2.179 | 2.723 |
| Auditar números (detectar el error plantado) | 1.105 | 2.029 | 2.536 |
| Generación de código (Python. SQL. debug) | 820 | 2.027 | 2.533 |
| Contenido con datos verificables (no inventar) | 560 | 2.016 | 2.520 |
| Creatividad (hooks. analogías. narrativa) | 372 | 1.944 | 2.430 |
| Integridad de idioma (no mezclar idiomas) | 1.650 | 1.832 | 2.290 |
| OCR / extracción desde imágenes | 942 | 1.528 | 1.910 |
| Resúmenes y extracción de datos | 1.450 | 1.450 | 1.812 |
| JSON estructurado (extracción. schemas) | 464 | 1.374 | 1.717 |
| Anti-alucinación (citas. contexto) | 331 | 982 | 1.227 |
| Capacidades de agente (delegación. skills) | 692 | 919 | 1.148 |
| Tool calling (llamada de funciones) | 360 | 894 | 1.117 |
| Seguir instrucciones al pie de la letra | 497 | 892 | 1.115 |
| Traducción (es↔en) | 730 | 845 | 1.056 |
| Orquestación (flujos de varios pasos) | 627 | 798 | 997 |
| Multi-turno (debugging. requisitos) | 466 | 658 | 822 |
| No inventar herramientas (abstenerse cuando no hay) | 132 | 603 | 753 |
| Extraer los datos verificables de un texto | 352 | 516 | 645 |
| Verificar un dato contra su fuente | 158 | 507 | 633 |
| Resistencia a prompt injection | 184 | 491 | 613 |
| Soporte al cliente (clasificar y responder) | 434 | 438 | 547 |
| Encontrar el sitio oficial de una empresa | 239 | 243 | 303 |
| Precisión literal (hex. JWT. configs) | 150 | 166 | 207 |
Los números oficiales de KAT Coder Pro v2.5
Acá no los repetimos, y es a propósito. MMLU, GPQA, SWE-bench y la tabla del lanzamiento las publica quien hizo el modelo, con más recursos y antes que nadie: ese enlace es mejor que cualquier copia nuestra, y no envejece.
Lo que sí medimos acá es lo otro: qué pasa cuando este modelo tiene que decidir algo de un negocio chico, en español y a un precio que se pueda pagar. Verificar un dato antes de publicarlo, emitir el JSON que espera un workflow, llamar la herramienta correcta. Eso no está en la tarjeta del fabricante.
¿Es el mejor para TU caso?
Filtra por presupuesto, calidad mínima y tipo de tarea. En 30 segundos sabes si KAT Coder Pro v2.5 es tu opción o hay algo mejor para lo que haces.
Ir a la calculadora →