Nemotron 3.5 Lightning: para qué sirve de verdad (benchmark en español)
Lo mejor que tiene es Coding, y aun así queda abajo (#70 de 74 entre los que rinden el examen completo), y donde menos rinde es Agentes (7.19 contra 9.10). Está en el tercio más barato del ranking: $0.324 por cada 1.000 llamadas.
Dónde está parado, pilar por pilar
La nota de la derecha es sobre 10. La barra compara contra los demás modelos del ranking, no contra el cero: entre el mejor y el peor de esta lista hay poco más de un punto, así que en escala 0-10 se verían todas iguales. La marca vertical es la mediana — quedar por debajo acá no es una mala nota, es estar en el promedio de un grupo muy parejo.
Medido con 137 runs que puntúan, juez Phi-4 vía OpenRouter · actualizado 2026-11-12 · datos abiertos
Tareas de agente: hasta que la tarea se corrija, no cuentan los checks cuya trampa el agente no podía conocer por el enunciado (en facturación, 3 de sus 8). La nota de agente y «N de 4» se calculan sin ellos.
Qué hace bien y qué no
Su media entre las 33 tareas medidas es 7.75. Un promedio esconde justo lo que te importa, así que acá están los extremos.
Donde rinde por encima de sí mismo
- Precisión literal (hex, JWT, configs) — 9.58 (+1.83 contra su media).
- JSON estructurado (extracción, schemas) — 9.32 (+1.57 contra su media).
- Contenido genérico (blog, email, social) — 8.96 (+1.21 contra su media).
- Integridad de idioma (no mezclar idiomas) — 8.87 (+1.12 contra su media).
Donde se cae
- Resistencia a prompt injection — 2.83 (-4.92 contra su media).
- Soporte al cliente (clasificar y responder) — 5.89 (-1.86 contra su media).
- Auditar números (detectar el error plantado) — 6.24 (-1.51 contra su media).
- Orquestación (flujos de varios pasos) — 6.27 (-1.48 contra su media).
Si Nemotron 3.5 Lightning no te cierra
| Modelo | Calidad | $/1k | Latencia | Por qué |
|---|---|---|---|---|
| Ling 3.0 Flash | 8.85 | $0.101 | 54.8 s | misma nota o mejor, menos dinero por llamada |
La ficha: Nemotron 3.5 Lightning en números
| Calidad medida | |
|---|---|
| Runs que puntúan | 137 |
| Tool calling | 6.38 |
| ¿Maneja credenciales? | sí (0 de 6) |
| Resistencia a prompt injection | 1.00 |
| Precio | |
| Precio por millón · entrada | $0.080 |
| Precio por millón · salida | $0.200 |
| Rendimiento y límites | |
| Latencia total media | 5.4 s |
| Ventana de contexto | 262.144 |
| Contexto útil medido | 128.000 |
Lo que cuesta frente a los mejores del ranking
| Modelo | Calidad | $/1.000 llamadas |
|---|---|---|
| Nemotron 3.5 Lightning | 7.18 | $0.324 |
| GLM 5.3 | 9.00 | $7.02 |
| Claude Fable 5.1 | 8.88 | $78.00 |
- GLM 5.3 (el techo medido) rinde 25% más (9.00 contra 7.18) y cuesta 22 veces más por llamada.
- Claude Fable 5.1 (el caro que todos conocen) rinde 24% más (8.88 contra 7.18) y cuesta 241 veces más por llamada.
Cuánto max_tokens darle, por tarea
| Tarea | Mediana | Peor caso medido | max_tokens sugerido |
|---|---|---|---|
| Tareas largas (sostener el hilo a lo largo de muchos turnos) | 3.154 | 10.174 | 12.717 |
| Razonamiento profundo (matemática. Fermi) | 2.010 | 9.275 | 11.593 |
| Presentaciones (slides. reportes) | 2.974 | 2.974 | 3.717 |
| Contenido startup (newsletter. actualidad) | 1.779 | 2.521 | 3.151 |
| Razonamiento general (lógica. decisiones) | 2.009 | 2.447 | 3.058 |
| Decisiones de negocio (prioridades. plan) | 1.238 | 2.137 | 2.671 |
| Gestión de tareas (action items. planes) | 1.315 | 1.961 | 2.451 |
| Noticias + SEO (artículos completos) | 1.170 | 1.861 | 2.326 |
| Estrategia (pricing. planificación) | 1.677 | 1.801 | 2.251 |
| Ventas en frío (cold email. campañas) | 547 | 1.682 | 2.102 |
| Auditar números (detectar el error plantado) | 1.014 | 1.606 | 2.007 |
| Generación de código (Python. SQL. debug) | 1.094 | 1.581 | 1.976 |
| Redactar una noticia desde una fuente | 998 | 1.358 | 1.697 |
| Creatividad (hooks. analogías. narrativa) | 861 | 1.251 | 1.563 |
| JSON estructurado (extracción. schemas) | 106 | 1.097 | 1.371 |
| Integridad de idioma (no mezclar idiomas) | 1.003 | 1.082 | 1.352 |
| Contenido genérico (blog. email. social) | 807 | 1.026 | 1.282 |
| Multi-turno (debugging. requisitos) | 638 | 886 | 1.107 |
| Anti-alucinación (citas. contexto) | 222 | 837 | 1.046 |
| OCR / extracción desde imágenes | 465 | 823 | 1.028 |
| Orquestación (flujos de varios pasos) | 59 | 792 | 990 |
| Contenido con datos verificables (no inventar) | 353 | 580 | 725 |
| No inventar herramientas (abstenerse cuando no hay) | 105 | 554 | 692 |
| Resúmenes y extracción de datos | 504 | 504 | 630 |
| Capacidades de agente (delegación. skills) | 123 | 400 | 500 |
| Traducción (es↔en) | 126 | 326 | 407 |
| Seguir instrucciones al pie de la letra | 317 | 317 | 396 |
| Aguja en el pajar (contexto largo en español) | 185 | 295 | 368 |
| Precisión literal (hex. JWT. configs) | 57 | 216 | 270 |
| Tool calling (llamada de funciones) | 133 | 149 | 186 |
| Soporte al cliente (clasificar y responder) | 89 | 100 | 125 |
| Verificar un dato contra su fuente | 47 | 57 | 71 |
| Resistencia a prompt injection | 16 | 37 | 46 |
Los números oficiales de Nemotron 3.5 Lightning
Acá no los repetimos, y es a propósito. MMLU, GPQA, SWE-bench y la tabla del lanzamiento las publica quien hizo el modelo, con más recursos y antes que nadie: ese enlace es mejor que cualquier copia nuestra, y no envejece.
Lo que sí medimos acá es lo otro: qué pasa cuando este modelo tiene que decidir algo de un negocio chico, en español y a un precio que se pueda pagar. Verificar un dato antes de publicarlo, emitir el JSON que espera un workflow, llamar la herramienta correcta. Eso no está en la tarjeta del fabricante.
¿Es el mejor para TU caso?
Filtra por presupuesto, calidad mínima y tipo de tarea. En 30 segundos sabes si Nemotron 3.5 Lightning es tu opción o hay algo mejor para lo que haces.
Ir a la calculadora →