Cristian Tala_

Gemma 4 31B: para qué sirve de verdad (benchmark en español)

Su fuerte es Coding (#2 de 97 entre los que rinden el examen completo), y donde menos rinde es Agentes (7.57 contra 9.84). Está en el tercio más barato del ranking: $0.540 por cada 1.000 llamadas.

Nota de calidad8.48/10#3 de 97 · del mejor al peor hay 1.3 puntos
Por 1.000 llamadas$0.540más barato que 78 de 97
Al mes, uso típico$0.81050 llamadas por día, todos los días
Velocidad47 tok/s17.2 s de espera media
⬡ Open source · Gemma Terms ⚒ Puede usar herramientas ◈ Razona antes de responder ⌸ Le caben ~440 páginas a la vez ⛨ Cae ante instrucciones ocultas · 1.4/10

Dónde está parado, pilar por pilar

La nota de la derecha es sobre 10. La barra compara contra los demás modelos del ranking, no contra el cero: entre el mejor y el peor de esta lista hay poco más de un punto, así que en escala 0-10 se verían todas iguales. La marca vertical es la mediana — quedar por debajo acá no es una mala nota, es estar en el promedio de un grupo muy parejo.

Coding 9.84 (+0.77 vs mediana)
Contenido 8.78 (+0.40 vs mediana)
Razonamiento 8.10 (+0.15 vs mediana)
Agentes 7.57 (+0.03 vs mediana)

Medido con 143 runs que puntúan, juez Phi-4 local · actualizado 2026-08-23 · datos abiertos

Qué hace bien y qué no

Su media entre las 33 tareas medidas es 7.79. Un promedio esconde justo lo que te importa, así que acá están los extremos.

Donde rinde por encima de sí mismo

Donde se cae

Si Gemma 4 31B no te cierra

Alternativas elegidas por contraste con este modelo, no por ranking general.

ModeloCalidad$/1kLatenciaPor qué
Qwen 3.7 Flash
Más barato, calidad equivalente
8.49$0.20428.5 smisma nota o mejor, menos plata por llamada
Gemini 3.5 Flash Lite
Responde antes
8.23$3.844.6 sal menos 40% menos de espera, sin caer de nota

La ficha: Gemma 4 31B en números

Todo esto sale de runs propios, guardados y auditables. La latencia es la total de respuesta, no el time-to-first-token.

Calidad medida
Runs que puntúan143
Tool calling8.39
Resistencia a prompt injection1.41
Precio
Precio por millón · entrada$0.100
Precio por millón · salida$0.340
Rendimiento y límites
Latencia total media17.2 s
Ventana de contexto262.144
Contexto útil medido128.000

Contra los mejores del ranking, en plata

La pregunta útil no es cuánto le falta a Gemma 4 31B para ser el mejor: es cuánta calidad extra estás comprando, y a cuántas veces el precio. Eso es lo que decide si conviene.

ModeloCalidad$/1.000 llamadas
Gemma 4 31B
Este modelo
8.48$0.540
GPT-5.6 Luna
El de más calidad medida
8.52$0.930
Claude Opus 4.8
El frontier más caro del top 10
8.48$39.00

Los tres salen de las mismas 29 tareas, el mismo juez y los mismos límites. Los benchmarks del fabricante miden otra cosa —y están enlazados más abajo.

Cuánto max_tokens darle, por tarea

Si tu nodo o tu script queda por debajo de esto, Gemma 4 31B no falla: entrega de menos — y quien lo consume lo lee como que no había nada que reportar. Es el modo de falla más caro que hay, porque se parece a que todo salió bien.

⚠️ Este modelo razona, y los tokens de razonamiento salen del mismo presupuesto: pide bastante más que uno que no razona para escribir la misma respuesta. Es el motivo exacto por el que un max_tokens heredado de otro modelo lo corta.

TareaMediana Peor caso medidomax_tokens sugerido
Tareas largas (sostener el hilo 8-12 turnos)2.9349.25311.566 (piso)
Presentaciones (slides. reportes)2.1242.1242.655
Generación de código (Python. SQL. debug)9012.0752.593
Contenido startup (newsletter. actualidad)1.1891.5851.981
Noticias + SEO (artículos completos)8231.4441.805
Decisiones de negocio (prioridades. plan)8991.4391.798
Razonamiento general (lógica. decisiones)1.1501.3491.686
Estrategia (pricing. planificación)1.2781.3131.641
Auditar números (detectar el error plantado)8561.2791.598
Gestión de tareas (action items. planes)8981.1911.488
Razonamiento profundo (matemática. Fermi)1.0231.1311.413
Ventas en frío (cold email. campañas)3671.0861.357
Contenido genérico (blog. email. social)1.0061.0851.356
Creatividad (hooks. analogías. narrativa)4391.0601.325
JSON estructurado (extracción. schemas)1569781.222
Integridad de idioma (no mezclar idiomas)7359701.212
OCR / extracción desde imágenes4388591.073
Multi-turno (debugging. requisitos)780784980
Contenido con datos verificables (no inventar)288694867
Extraer los datos verificables de un texto128668835
Orquestación (flujos de varios pasos)286539673
Anti-alucinación (citas. contexto)250474592
No inventar herramientas (abstenerse cuando no hay)24463578
Capacidades de agente (delegación. skills)260411513
Traducción (es↔en)112396495
Resúmenes y extracción de datos373373466
Seguir instrucciones al pie de la letra228246307
Precisión literal (hex. JWT. configs)58219273
Soporte al cliente (clasificar y responder)119174217
Tool calling (llamada de funciones)52101126
Verificar un dato contra su fuente495771
Resistencia a prompt injection244657
Encontrar el sitio oficial de una empresa404556
Aguja en el pajar (contexto largo en español)384353

Las marcadas (piso) tocaron el techo del propio examen (8.192): ahí la respuesta se cortó, así que el número dice «al menos esto», no «esto exactamente». Dar más aire en esas.

Los números oficiales de Gemma 4 31B

Acá no los repetimos, y es a propósito. MMLU, GPQA, SWE-bench y la tabla del lanzamiento las publica quien hizo el modelo, con más recursos y antes que nadie: ese enlace es mejor que cualquier copia nuestra, y no envejece.

Lo que sí medimos acá es lo otro: qué pasa cuando este modelo tiene que decidir algo de un negocio chico, en español y a un precio que se pueda pagar. Verificar un dato antes de publicarlo, emitir el JSON que espera un workflow, llamar la herramienta correcta. Eso no está en la tarjeta del fabricante.

¿Es el mejor para TU caso?

Filtra por presupuesto, calidad mínima y tipo de tarea. En 30 segundos sabes si Gemma 4 31B es tu opción o hay algo mejor para lo que haces.

Ir a la calculadora →