El plan maestro de prueba y evaluación ( TEM ) es un aspecto crítico de la gestión de proyectos que involucran sistemas complejos que deben satisfacer los requisitos de especificación. El TEMP se utiliza para respaldar eventos programáticos llamados decisiones de hitos que separan las fases individuales de un proyecto. Para los sistemas militares, el nivel de financiación determina la categoría de adquisición y la organización responsable de la decisión importante. [1] [2]
Generalmente se utiliza una matriz de trazabilidad para vincular elementos dentro del TEMP con elementos dentro de las especificaciones .
El Plan Maestro de Pruebas y Evaluación documenta la estructura general y los objetivos de la Prueba y Evaluación de un programa. [3] Cubre actividades durante el ciclo de vida de un programa e identifica criterios de evaluación para los evaluadores. [4]
El plan maestro de pruebas y evaluación consta de pruebas individuales. Cada prueba contiene lo siguiente.
El escenario de prueba establece las condiciones de prueba. Esto suele estar asociado con un perfil de misión específico. Para los sistemas militares, este sería un escenario de combate y puede implicar Prueba y Evaluación de Fuego Real (LFT&E). Para los sistemas comerciales, esto implicaría un tipo específico de situación que involucra el uso del elemento que se está desarrollando.
Por ejemplo, la operación en clima frío puede requerir que la operación se evalúe a temperaturas inferiores a C utilizando una cámara ambiental. La evaluación del funcionamiento con una interfaz de vehículo puede requerir una evaluación de compatibilidad con una prueba de vibración . La evaluación de una tienda de Internet requeriría que el sistema guiara al usuario a través de la compra de un producto mientras el sistema está cargado con otro tráfico.
El escenario de prueba identifica lo siguiente.
La recopilación de datos identifica la información que debe recopilarse durante la prueba. Esto implica una configuración preliminar antes de que comience la prueba. Esto puede implicar la preparación para cualquiera de los siguientes.
Los sistemas que incorporan una computadora generalmente requieren la capacidad de extraer y registrar tipos específicos de datos del sistema mientras funciona normalmente.
La recopilación de datos electrónicos puede iniciarse y detenerse como una de las acciones descritas en el escenario de prueba.
Cuando el acceso a los datos esté restringido, por lo que la transferencia de datos entre organizaciones podrá requerir un Plan de Recogida de Datos . Esto puede ocurrir con sistemas militares clasificados .
Los datos se analizan una vez finalizadas las pruebas. Este análisis se llama evaluación del desempeño.
Las medidas de eficacia son métricas específicas que se utilizan para medir los resultados en la misión general y la ejecución de las tareas asignadas.
Estos pueden tener límites de desempeño flexibles asociados con el resultado de un evento específico. Por ejemplo, la primera bala disparada con un arma apuntada usando un radar no impactaría una ubicación específica, pero la posición se puede medir usando el radar, por lo que el sistema debería poder disparar una bala dentro de un radio específico después de que se hayan disparado varias balas. despedido. El número de rondas necesarias para lograr que uno esté dentro del límite es el MOE. El radio sería una medida de rendimiento (MOP).
Las medidas de desempeño son métricas específicas que tienen un límite de aprobación o falla que debe cumplirse. Estos generalmente se identifican con las palabras deberá o debe en la especificación.
Un tipo de MOP es la distancia que debe recorrer un vehículo con una carga específica a una velocidad específica antes de quedarse sin combustible.
Otro tipo de MOP es la distancia a la que un radar puede detectar un reflector de 1 metro cuadrado.
Las medidas de idoneidad evalúan la capacidad de recibir soporte en el entorno operativo previsto.
Como ejemplo, esto puede ser una evaluación del tiempo medio entre fallas (MTBF) que se evalúa durante otras pruebas. Un sistema con fallas excesivas puede satisfacer todos los demás requisitos y no ser adecuado para su uso. Un arma que se atasca cuando está sucia no es apta para uso militar.
Estos requisitos están asociados con las ilidades.
Los resultados de la evaluación TEMP se utilizan para múltiples propósitos.
La planificación de la misión implica la traducción de MOE, MOP y MOS a lo siguiente.
ROC y POE son expectativas específicas evaluadas por TEMP que se utilizan para determinar cómo desplegar activos para satisfacer un requisito de misión específico. Las pruebas de diagnóstico garantizan que estas expectativas se cumplan durante la duración de la misión.
El Departamento de Defensa de Australia también ha utilizado el término "plan maestro de pruebas y evaluación" como una guía general distinta de las funciones de prueba y evaluación en un desarrollo. [5] Otros utilizan el término, o términos similares, como "Plan maestro de prueba y evaluación".
