Ingeniero QA: pregunta de entrevista
¿Qué métricas de calidad usas?
Usa métricas de resultado y flujo: defectos escapados por impacto, fallos de cambios, tiempo de detección y recuperación, flakiness, cobertura de riesgos críticos y fallos de clientes; no número bruto de tests.
Respuesta directa
Qué debe cubrir una buena respuesta
Cómo funciona
Las métricas de calidad deben describir resultados que los usuarios y el negocio sienten, y el flujo que los produce. Los defectos escapados ponderados por severidad muestran qué se le pasó a las pruebas; la tasa de fallo de cambios y los tiempos de detección y recuperación muestran cuán seguro llegan los cambios a producción; la tasa de fallos reportados por clientes y el volumen de soporte por release muestran la experiencia; la tasa de pruebas inestables y el tiempo de la suite muestran si el ciclo de feedback es fiable y rápido; y la cobertura de las áreas de alto riesgo identificadas muestra adónde va el esfuerzo. Los conteos brutos de pruebas escritas o bugs encontrados no dicen nada de calidad e invitan a manipular. Cada métrica se sigue como tendencia y se discute frente a los cambios que la movieron.
Ejemplo
La revisión trimestral de calidad de un equipo mostró defectos escapados de 14 a 6 sin ninguno por encima de sev-2, tasa de fallo de cambios estable en 5 por ciento, tiempo de recuperación de 40 a 12 minutos tras los simulacros de rollback, tasa de pruebas inestables subiendo al 4 por ciento, lo que disparó una limpieza, y un mapa de cobertura mostrando que el nuevo módulo de facturación aún no tenía sesiones exploratorias. El número de pruebas de la suite no estaba en la diapositiva.
Errores frecuentes
- Reportar número de pruebas y porcentajes de cobertura como si fueran calidad.
- Medir defectos escapados sin severidad, de modo que una errata cuenta como una pérdida de datos.
- Seguir una métrica sobre la que nadie actúa.
Una estructura útil para responder
Responde desde tu propia experiencia.
No memorices un guion: usa solo ejemplos que puedas explicar con honestidad en preguntas posteriores.
Abre el espacio de trabajo de escritorio y ensaya una respuesta clara con tus propias palabras.