Test und Bewertung, The Mitre Corporation

Definition: Test - Evaluation (T-E) ist der Prozess, bei dem ein System oder Komponenten verglichen wird gegen Anforderungen und Spezifikationen durch Tests. Die Ergebnisse werden ausgewertet Fortschritt der Konstruktion zu bewerten, Performance, Wartbarkeit usw. Developmental Tests und Bewertung (DT-E) ist ein Engineering-Werkzeug zu reduzieren, Risiken während des Erfassungszyklus verwendet. Betriebsprüfung und Bewertung (OT-E) ist die tatsächliche oder simulierte Beschäftigung, durch die typischen Anwender eines Systems unter realistischen Betriebsbedingungen [1].

Stichwort: Analyse, DT-E, Bewertung, OT-E, Leistung, Prüfung, Verifizierung

Testen ist ein Mechanismus Qualität eines Produkt, System oder Fähigkeit (z.B. richtigen Produkt, gebaut rechts) zu gewährleisten. Um wirksam zu sein, Prüfung nicht auftreten kann erst am Ende einer Entwicklung. Es muss kontinuierlich während des gesamten Lebenszyklus angesprochen werden.

Test und Bewertung beinhaltet ein Produkt aus der Komponentenebene Auswertung in dem Stand-alone-System, integriertes System, und gegebenenfalls System-of-System und Unternehmen. Abbildung 1 zeigt diese Ebene der Auswertung und wie sie ausgerichtet mit der Regierung DT, OT und Akkreditierungs- und Zertifizierungstests.

Abbildung 1. Produktlebenszyklus-Testphasen

Die Artikel, in diesem Thema sind so angeordnet, entsprechend einen rechnerischen V-Modell-Lebenszyklus [2] Chronologie eines Programm-Akquisitions: (1) die Erstellung und TE Strategien Beurteilung (2) Beurteilung der TE Pläne und Verfahren, (3) die Überprüfung und Validierung, und (4) die Erstellung und Zertifizierung und Akkreditierung Strategien während des gesamten Prozesses zu bewerten. Wie an anderer Stelle im Handbuch erwähnte, ist der Systemlebenszyklus selten, wenn überhaupt, so linear wie die vereinfachte V-Modell könnte bedeuten.

Best Practices und Lessons Learned

Beschäftigen Prototypen und M-S zur Geltung. Prototypen und / oder Modellierung und Simulation (M-S) frühzeitig in einem Programm helfen, die Systemleistung vorhersagen und die erwarteten Ergebnisse zu identifizieren, sowohl gute als auch schlechte. Beide Techniken können bei der Gestaltung verwendet werden, Auswerten oder Debuggen Teile eines Systems, bevor die Kosten entstehen „bending Metall.“

Der gesunde Menschenverstand-manchmal eine Seltenheit. Mit gesundem Menschenverstand in Tests. Zum Beispiel, während es, dass die Umwelt-Tests, um sicherzustellen, umfasst die Umgebung, die Ihr System wird erwartet, dass für den Betrieb in unter Angabe und Testen eines Systems für den Betrieb bis -70 ° C notwendig ist, wann wird es in einem Büro-ähnlichen Umgebung verwendet werden, ist ein sicherer Art und Weise, um entweder den Test nicht bestehen oder die Kosten des Systems jenseits der Vernunft fahren. Dies ist ein besonders häufiger Fehler, wenn Systeme für die mobile oder in der Luft Umgebungen zu entwerfen. Extreme Temperaturen, Vibrationen, abgestrahlten Emissionen, etc. sind nicht immer in diesen Umgebungen auftreten. Stellen Sie sicher, dass die Tests realistisch sind.

Teststrategie-Start kontinuierlich früh und verfeinern. Planen Sie die Teststrategie vom Beginn des Programms und verfeinert es während des gesamten Lebenszyklus des Programms. Beziehen Sie die richtigen Akteure in der Entwicklung und Überprüfung der Teststrategie und Pläne.

Sie nicht die Grundlagen übersehen. Stellen Sie sicher, dass die Tests entwickelt wurden, mit einer Anforderung Ziel und in der Lage zu sein, die Einhaltung der Beurteilung. Stellen Sie sicher, dass, wenn ein Test bestimmt viele unteren Level-Anforderungen zu validieren, Sie ausreichend mit den Details des Systemdesigns und zur Verfügung haben die Ergebnisse der Komponentenebene Tests vertraut sind. Dies ist besonders wichtig bei der Vorbereitung für den Betrieb Tests.

Referenzen - Ressourcen

Weitere Referenzen - Ressourcen

Acquisition Universität Defense, "Test and Evaluation" Defense Acquisition Guidebook. Kapitel 9.