Performance
Volver a todos los artículos
ai

IA generativa en testing: qué automatizar en 2026 y qué todavía necesita criterio humano

Performance360 Engineering5 min de lectura

Todos los equipos de QA que hablamos este año ya “están usando IA” en algún punto de su pipeline. Casi ninguno tiene un criterio explícito de qué tareas delegarle y cuáles no. Esa falta de criterio, no la tecnología en sí, es la que está generando la mayoría de los incidentes que vemos en producción.

La brecha entre pilotar y confiar

El World Quality Report 2025-26 de Capgemini mide exactamente esa brecha: un 43% de las organizaciones está experimentando con IA generativa en ingeniería de calidad, pero solo un 15% la tiene escalada a nivel empresa. En el medio queda un 58% que reporta problemas concretos para adoptar herramientas de IA, y un 60% que todavía no resuelve cómo generar datos de prueba seguros y representativos a escala — que, no por casualidad, es el caso de uso de IA que más creció en el último año (de 14% a 25% de adopción).

43%

Organizaciones piloteando IA generativa en QA

15%

La tienen escalada a nivel empresa

60%

Sin datos de prueba seguros a escala

Fuente: World Quality Report 2025-26, Capgemini.

Ese salto de 43% a 15% no es un problema de madurez tecnológica. Es un problema de gobernanza: nadie definió todavía qué tareas puede tomar la IA sin supervisión y cuáles necesitan un humano en el loop antes de llegar a producción.

Lo que la IA ya automatiza con confianza

Con los agentes actuales, hay tareas donde delegar ya no es una apuesta —es simplemente más eficiente que hacerlo a mano:

  • Generación de tests desde requerimientos. Un agente puede navegar la aplicación, explorar el DOM y producir un test de Playwright ejecutable con locators razonablemente resilientes, a partir de una descripción en lenguaje natural del flujo.
  • Self-healing de locators. Cuando la UI cambia, el agente re-apunta el selector automáticamente en vez de romper la suite completa.
  • Testing visual. Comparación perceptual que filtra ruido (antialiasing, renders levemente distintos) y solo levanta regresiones visuales reales.
  • Detección de tests flaky. Análisis estadístico sobre el historial de ejecuciones para poner en cuarentena tests no-determinísticos, sin revisión manual caso por caso.
  • Root-cause analysis. Correlacionar un fallo con logs, traces, commits recientes y patrones históricos — el tipo de correlación textual heterogénea donde un LLM rinde particularmente bien.

Esta lista sale directo de la guía AI-Augmented Software Testing 2026 de QA Skills, y coincide con lo que estamos viendo en los engagements que llevamos adelante.

Lo que todavía exige criterio humano

Acá es donde la mayoría de los equipos se golpea contra la pared:

Un passing de un test generado por IA solo significa que las aserciones que existen, pasaron.

— guía de QA Skills, 2026

Un test puede pasar en verde y no estar verificando nada relevante, porque la IA generó la aserción sin conocer el requerimiento de negocio real detrás. Por eso la recomendación que repiten tanto analistas como practicantes es consistente: la definición de qué es “correcto” no se delega.

Gartner lo resume así, citado en la misma guía: mantené el criterio humano en la única cosa que la IA no puede poseer — la definición de qué significa “correcto”. El reporte State of Digital Quality in AI 2026 de Applause va en la misma línea. Adonis Celestine, Senior Director de la práctica de Automatización, lo plantea sin vueltas:

Un buen tester se pregunta las implicancias y riesgos de construir una feature, y ahora, usando IA para testear, muchas veces estamos saltándonos esa validación.

Y Chris Sheehan, EVP de High Tech and AI en Applause, agrega el problema de fondo cuando la IA testea a la IA: muchos equipos “carecen de la metodología especializada y el rigor estadístico necesarios para que esas evaluaciones sean significativas a escala”. La conclusión del reporte es la frase que más nos gustó de toda esta investigación: los jueces de IA entregan escala y consistencia, pero los expertos humanos anclan la verdad de base.

Funcional y no funcional: el mismo dilema, matices distintos

En testing funcional, el riesgo de delegar de más es que una aserción generada automáticamente valide el comportamiento equivocado y nadie se dé cuenta hasta que el cliente lo reporta. En testing no funcional —performance, resiliencia, observabilidad— el riesgo tiene otra forma: la IA es extraordinaria correlacionando telemetría (logs, traces, métricas, commits), pero no tiene ningún criterio propio sobre qué SLO es aceptable para tu negocio, ni qué nivel de riesgo tolera tu industria un viernes de Black Friday. Esa decisión sigue siendo 100% humana, y en industrias reguladas (banca, salud, seguros) directamente no es delegable por motivos de compliance.

Forrester lo confirma desde el ángulo de gobernanza: menos del 15% de las empresas activará funciones agénticas en sus suites de automatización inteligente durante 2026, porque los desafíos de ROI y gobernanza pesan más que la presión de los proveedores. La mayoría va a seguir corriendo automatización determinística —la que se puede auditar paso a paso— para todo lo que importa de verdad.

Qué hacer con esto si sos un equipo de ingeniería

Cuatro recomendaciones concretas, no un manifiesto:

  1. Pilotá angosto y específico, no “adoptar IA” como iniciativa genérica. Generación de tests y self-healing de locators son los puntos de entrada con mejor relación esfuerzo/riesgo.
  2. Poné un gate de revisión humana en las aserciones, no en el código del test. Lo que hay que auditar es qué se está verificando, no cómo está escrito.
  3. Invertí en datos de prueba sintéticos ahora. Es el caso de uso de IA que más creció y, al mismo tiempo, el que más organizaciones reportan sin resolver — quien lo resuelva primero saca ventaja real.
  4. Medí adopción en producción, no en piloto. El 43% que “está probando IA” no te dice nada sobre madurez real. El 15% que la tiene en producción, sí.

Si tu equipo está en el medio de esa brecha —piloteando IA generativa pero sin un criterio claro de qué delegar— es exactamente el tipo de problema que resolvemos con equipos de ingeniería de calidad. Escribinos y lo hablamos.

Fuentes