M365Con 2027 – conferencia online gratuita · 11–22 Jan 2027 · 120 sessions→ m365con.net

Blog · Mirko Peters

Pruebas autorreparables: qué significa el término y dónde termina

Por · · Actualizado

La automatización de pruebas autorreparable repara en tiempo de ejecución los localizadores que dejan de funcionar. Aprende cómo funciona, qué no puede arreglar, cómo puede ocultar errores y qué salvaguardas establecer.

Traducido automáticamente con IA a partir de la publicación original. Lee el original en inglés

La automatización de pruebas autorreparable significa que una herramienta de pruebas repara por sí sola un localizador roto, de modo que una prueba de interfaz sigue ejecutándose tras un cambio inofensivo, como un ID renombrado. Esta guía está dirigida a ingenieros de automatización de pruebas que han oído el término en una presentación comercial y quieren una respuesta sensata. Aprenderás cómo funciona la reparación, qué puede arreglar, qué no, cómo puede ocultar un error real y qué reglas la mantienen segura. Un ejemplo práctico con cifras ficticias muestra tanto el beneficio como el riesgo.

Puntos clave

  • La autorreparación significa que una herramienta de pruebas encuentra un elemento de la interfaz por otras pistas cuando su localizador almacenado deja de coincidir, de modo que la prueba puede continuar en lugar de fallar.
  • Funciona casi exclusivamente con localizadores, no con aserciones, flujos de prueba, reglas de negocio o problemas de sincronización, así que cubre una parte reducida del mantenimiento de las pruebas.
  • El principal riesgo es la regresión enmascarada: la herramienta se adapta a un elemento modificado que en realidad es un defecto, y la prueba pasa mientras la experiencia de usuario está rota.
  • La documentación de los proveedores indica que la reparación se produce en tiempo de ejecución y que el script no cambia, por lo que los localizadores reparados siguen necesitando revisión y volver a guardarse.
  • Un uso seguro implica registrar cada reparación, revisarlas según un calendario, no permitir nunca que la herramienta cambie las aserciones y vigilar los saltos repentinos en la tasa de aciertos.

Qué es una prueba autorreparable, en la práctica

Una prueba de interfaz localiza cada elemento de una página mediante un localizador. Un localizador es una regla como "el elemento con ID btn-pay" o "el botón llamado Pay". En la automatización de pruebas tradicional, una persona edita los scripts de prueba cada vez que una regla deja de coincidir. En un conjunto de pruebas grande, un único rediseño puede hacer que cientos de pasos fallen. Cada vez que una prueba falla, un ingeniero de QA tiene que revisarla, y el equipo dedica días a tareas de reparación o recurre a las pruebas manuales.

La autorreparación consiste en la idea de que la herramienta repara esa regla por sí misma, de modo que una prueba autorreparable sobrevive a un cambio que rompería una prueba tradicional. El artículo de BugBug Self Healing Test Automation: Hype & Reality la define como mecanismos que ajustan automáticamente la forma en que una prueba identifica los elementos de la interfaz cuando el localizador original deja de funcionar.

La reparación no significa que la herramienta entienda tu producto. Significa que la herramienta intenta encontrar de nuevo el mismo elemento con otras pistas y después continúa la ejecución. Considera una prueba autorreparable como una solución para un tipo concreto y reducido de rotura: cambios en la interfaz que dejan el comportamiento igual.

Cómo funciona la reparación de localizadores

Los detalles varían según el marco de pruebas y el producto, pero la mayoría de los mecanismos de autorreparación siguen el mismo patrón.

  1. Aprender. Durante las ejecuciones de pruebas que pasan, la herramienta registra más de una pista para cada elemento. BugBug lo describe como una huella: atributos como el ID, el texto, las clases, las etiquetas ARIA y la posición en la estructura de la página.
  2. Detectar. Cuando el localizador almacenado no encuentra nada, la herramienta no falla de inmediato.
  3. Buscar. Recorre la página en busca del elemento que más se parezca al que recordaba. Las pistas más sólidas y estables pesan más, y las más débiles actúan como alternativa.
  4. Continuar e informar. Usa la nueva coincidencia, termina la ejecución y registra lo que ha hecho.

La documentación de BrowserStack sobre su funcionalidad de autocuración con Playwright sigue el mismo proceso. Indica que la autocuración se activa cuando el localizador original deja de resolverse, y que necesita al menos una ejecución anterior correcta con el mismo identificador del elemento. También explica que la autocuración se produce en tiempo de ejecución y mantiene en verde una única ejecución, mientras que el propio script no cambia. La página recomienda incorporar el localizador corregido en tu prueba. Además, enumera sus límites: la autocuración añade análisis adicional durante la ejecución, el soporte de Playwright se describe como limitado y no puede recuperarse si el elemento realmente ya no existe.

Algunas herramientas más recientes utilizan autocuración con IA: un modelo, a menudo basado en IA generativa, elige el elemento de sustitución en lugar de aplicar una regla de puntuación fija. La guía de T-Plan señala que la autocuración asistida por IA introduce un comportamiento probabilístico en las pruebas y que la automatización fiable debe ser determinista siempre que sea posible. BugBug añade que la autocuración no implica que un agente de IA reescriba la lógica de la prueba ni que comprenda realmente la aplicación.

El marketing suele afirmar que las pruebas con IA realizan la autocuración. En la práctica, la IA en las pruebas de software abarca un abanico amplio, desde un simple cálculo de similitud hasta un modelo que ordena los elementos candidatos. Pregunta a tu proveedor qué decide exactamente la IA y si el registro muestra por qué. Si la IA elige un elemento equivocado, puede colarse un defecto, así que una elección de la IA necesita la misma revisión que cualquier otra autocuración.

Ventajas de la autocuración y lo que no puede corregir

La autocuración ayuda sobre todo con los cambios cosméticos:

  • Un desarrollador renombra un ID o una clase CSS, y el comportamiento sigue igual.
  • Un cambio de diseño mueve un botón a otra posición.
  • Una actualización de la biblioteca de componentes cambia el marcado, pero no la pantalla.

En estos casos los beneficios son reales: menos mantenimiento de pruebas y los cambios de interfaz inofensivos dejan de hacer fallar muchos casos de prueba a la vez.

Las capacidades de autocuración de una herramienta encajan en una estrategia de automatización de pruebas más amplia, junto a las pruebas exploratorias, para la prueba continua. Protegen la cobertura de pruebas de la interfaz de usuario frente a los cambios constantes en ella. Las pruebas unitarias y las pruebas de API no utilizan localizadores de pantalla, así que no necesitan autocuración en absoluto.

La autocuración no ayuda con la mayoría de los otros motivos por los que fallan las pruebas. BugBug indica que la autocuración se aplica casi exclusivamente a los localizadores, no a las aserciones, los valores esperados, los flujos de prueba ni las reglas de negocio. Tampoco resuelve los problemas de temporización ni una mala arquitectura de pruebas. Si tu problema son las esperas inestables o los datos compartidos, trata antes las pruebas inestables como un tema aparte, porque la autocuración no las curará. El mismo artículo señala que la autocuración tiene dificultades en sistemas basados en roles, paneles dinámicos, transacciones de varios pasos y pantallas con muchas condiciones, y que cuanto más contexto se necesita para identificar un elemento, más difícil resulta.

Los buenos localizadores y los ID de prueba estables también evitan muchas roturas antes de que haga falta la autocuración. Las buenas prácticas de Playwright recomiendan localizadores que reflejen lo que ve el usuario, como el rol y el texto, en lugar de rutas frágiles de CSS o XPath. Este consejo también sirve en los conjuntos de pruebas de Selenium.

Automatización de pruebas con autocuración y el riesgo de regresiones enmascaradas

El riesgo más importante es fácil de enunciar. Una herramienta de autocuración que se adapta puede adaptarse a un defecto.

La guía de T-Plan sobre automatización de pruebas con autocuración lo denomina regresión enmascarada: un marco de trabajo puede adaptarse automáticamente a un elemento modificado que en realidad representa un defecto, de modo que la prueba pasa aunque la experiencia de usuario se haya degradado. Añade que esto genera una falsa confianza y reduce la confianza en la automatización. También señala que los sistemas de autocuración pueden elegir un elemento de sustitución incorrecto, que cuanta más agresiva es la autocuración, mayor es el riesgo de emparejamientos erróneos, y que algunos fallos deben seguir siendo visibles.

Imagina un botón Guardar en la aplicación bajo prueba que, tras una fusión defectuosa, se sustituye por un botón Eliminar en el mismo lugar. Una prueba que busca "el botón del pie del formulario" puede autocurarse hacia el nuevo botón, hacer clic en él y seguir adelante. El conjunto de pruebas sigue en verde, y el error llega a producción.

Por eso una tasa de aprobación en alza no siempre es buena noticia. Si tu tasa de aprobación sube después de una versión de la interfaz sin cambios correspondientes en las pruebas, revisa el registro de reparaciones antes de celebrarlo.

Medidas de protección que hacen que sea seguro usarlo

Las guías de T-Plan y BugBug dan consejos similares. Se aplican tanto si implementas la autorreparación por tu cuenta como si compras una herramienta con esa función:

  1. Registra cada reparación. Guarda el localizador anterior, el nuevo, el nivel de confianza de la coincidencia y los cambios que la herramienta hizo en la página.
  2. Revisa según un calendario. No permitas una adaptación silenciosa indefinidamente. Revisa el registro de reparaciones después de cada versión y aprueba o rechaza cada entrada.
  3. Usa el modo de sugerencia si puedes. Deja que la herramienta proponga una corrección y exige que una persona la acepte.
  4. Nunca le permitas cambiar las aserciones. La autorreparación puede cambiar la forma en que se encuentra un elemento. Nunca debe cambiar lo que la prueba espera, que es precisamente la intención de la prueba.
  5. Traslada las correcciones al código. Como la autorreparación solo corrige la ejecución, actualiza el script con el localizador mejor.
  6. Limita el alcance. No todos los elementos deberían repararse por sí solos. Los flujos críticos, como el pago, pueden necesitar comprobaciones más estrictas, como las pruebas visuales, que verifican el aspecto de la página.
  7. Vigila la tendencia. Un aumento repentino de la tasa de aprobación necesita una explicación, porque la automatización con autorreparación puede hacer que un conjunto de pruebas parezca más sano de lo que realmente está.

Ejemplo: una refactorización del proceso de compra, con y sin autorreparación

Las cifras son inventadas.

Un equipo tiene 400 pruebas automatizadas que se ejecutan en el navegador. Una refactorización del front-end renombra los ID de la página de compra. Sin autorreparación, 60 pruebas fallan por los localizadores, y cada fallo requiere revisión. Un ingeniero necesita unos dos días para repararlas y, durante ese tiempo, el equipo no tiene un resultado de regresión fiable.

Con la autorreparación activada, la herramienta repara los localizadores durante la ejecución de las pruebas para que cada una continúe, y 55 de esas 60 pruebas superan la validación con los localizadores reparados. El responsable de QA ve cada reparación en el informe. Cinco siguen fallando porque sus elementos se eliminaron a propósito. El ingeniero dedica medio día a esas cinco y una hora más a leer el registro de reparaciones.

En el registro, dos reparaciones parecen incorrectas. En una prueba de edición de una dirección, la herramienta hizo clic en "Eliminar dirección" cuando la prueba quería "Guardar dirección". La prueba solo comprobaba que la página seguía cargada, así que superó la validación. El ingeniero corrige ambos localizadores y añade una aserción más estricta que comprueba que la dirección guardada aparece en la lista.

El resultado: unos dos días de trabajo de reparación se reducen a aproximadamente un día. El ahorro es real, pero solo existe porque una persona leyó el registro. Sin esa revisión, dos pruebas habrían seguido en verde mientras comprobaban algo distinto de lo previsto.

Errores comunes

  • Considerar la autorreparación un sustituto de buenos localizadores. Los localizadores estables basados en rol, texto o ID de prueba evitan roturas y no tienen coste.
  • Dejarla funcionar en silencio. Si nadie lee el registro, las reparaciones incorrectas se acumulan sin que nadie las vea.
  • Esperar que arregle las pruebas inestables. Los problemas de tiempos y los datos de prueba inestables requieren soluciones diferentes.
  • Usarla en comprobaciones críticas sin salvaguardas adicionales. Añade pruebas de regresión visual o comprobaciones de datos a los flujos de pago y de permisos.
  • Creer las cifras de un proveedor sobre menor esfuerzo de mantenimiento de pruebas sin hacer un piloto. Mide el efecto real en tu propio conjunto de pruebas antes de comprometerte.

Cómo puede ayudar el software

Muchos frameworks de automatización de pruebas, plataformas en la nube y otras herramientas de automatización ofrecen ya autorreparación, en distintas formas: localizadores de respaldo sencillos, puntuación de similitud y selección de elementos basada en IA. Compáralas según los puntos anteriores, no según la etiqueta. Pregunta si la plataforma de autorreparación muestra cada reparación, si te permite aprobarla y si puede exportarla como cambio en el script. Un conjunto de Selenium o Playwright sin autorreparación, con localizadores bien elegidos y el hábito de revisar con regularidad, es una alternativa válida a cualquier herramienta de este tipo. Haz un piloto en una zona inestable y compara el tiempo de mantenimiento antes de decidir. Las herramientas basadas en agentes de IA, a menudo llamadas IA agéntica, que trabajan a partir de pasos descritos en lenguaje natural, plantean las mismas preguntas sobre la revisión.

Siguiente paso

Elige una parte de tu conjunto de pruebas de extremo a extremo que se rompa con frecuencia, activa la autorreparación allí durante una versión y revisa cada reparación a mano. Después decide si la automatización de pruebas con autorreparación merece un papel más amplio en tu conjunto, según cuántas reparaciones fueron correctas.

Entidades en este artículo

End-to-end testing AI agent Generative AI

Artículos relacionados

RSS