ISO/IEC/IEEE 29119 Software Testing-Standards

Die ISO/IEC/IEEE 29119-Normenreihe legt Standards für Software-Testing fest, inklusive Praktiken für Testprozesse, Testdokumentation, Testtechniken und Begrifflichkeiten. Die Anwendung dieser Standards gewährleistet Konsistenz, Transparenz und Effektivität im Testprozess.

Bestandteile Testabschlussbericht nach ISO/IEC/IEEE 29119

1. Executive Summary

Der Bericht beginnt mit einer Zusammenfassung der wichtigsten Ergebnisse und Erkenntnisse. Diese sollte knapp und prägnant die durchgeführten Tests, die Hauptergebnisse und die daraus resultierenden Empfehlungen umfassen.

2. Testumfang

Dieser Abschnitt dokumentiert den Umfang der Testaktivitäten, inklusive der getesteten und nicht getesteten Bereiche der Software. Er erläutert auch die Gründe für die Auswahl des Testumfangs.

3. Testziele

Hier definiert man die Ziele des Testprozesses, wie beispielsweise die Überprüfung der Funktionalität, der Leistung, der Sicherheit oder der Benutzerfreundlichkeit.

4. Testmethoden und -tools

Dieser Teil stellt die verwendeten Testmethoden und -tools vor und erläutert die Gründe für ihre Auswahl.

5. Testergebnisse

Die Testergebnisse präsentiert man hier in einer klaren und verständlichen Form. Der Bericht sollte sowohl die erfüllten als auch die nicht erfüllten Anforderungen auflisten und gegebenenfalls die Gründe für das Scheitern von Tests erläutern.

6. Gefundene Fehler und deren Status

Alle während der Tests gefundenen Fehler sollte man in diesem Abschnitt auflisten, inklusive des aktuellen Status jedes Fehlers (behoben, nicht behoben, in Bearbeitung).

7. Bewertung der Software-Qualität

Auf Grundlage der Testergebnisse und der gefundenen Fehler bewertet man die Qualität der Software und gibt an, inwiefern man die Testziele erreicht oder eben nicht erreicht hat.

8. Empfehlungen und nächste Schritte

Hier formuliert man Empfehlungen für die Freigabe der Software und für zukünftige Testaktivitäten.

9. Anhänge und Referenzen

Relevante Anhänge und Referenzen, die für ein umfassendes Verständnis des Berichts notwendig sind, fügt man in diesem Abschnitt hinzu.

Praktische Beispiele und Tipps zum Testabschlussbericht

Um den Testabschlussbericht effektiv zu gestalten, empfiehlt es sich, klare und verständliche Formulierungen zu verwenden und visuelle Elemente wie Tabellen oder Diagramme einzusetzen. So könnte man beispielsweise eine Tabelle zur Darstellung der Testergebnisse oder ein Balkendiagramm zur Visualisierung des Fehlerstatus verwenden.

Beispiel-Tabelle zur Darstellung von Testergebnissen

Beispiel-Balkendiagramm zur Visualisierung des Fehlerstatus

Fehlerstatus

Fazit

Ein Testabschlussbericht gemäß den ISO/IEC/IEEE 29119-Standards zu erstellen, stellt sicher, dass alle relevanten Aspekte des Testprozesses detailliert dokumentiert und bewertet werden. Dies fördert Transparenz, Konsistenz und Effektivität im Software-Testing und liefert wertvolle Erkenntnisse für die Entscheidungsfindung und für zukünftige Projekte.

Der Beitrag Testabschlussbericht – Basierend auf ISO/IEC/IEEE 29119 erschien zuerst auf CEOsBay.

Was ist Anweisungsüberdeckung?

Anweisungsüberdeckung ist eine Metrik im Software Testing, die den Anteil des Quellcodes misst, den die durchgeführten Tests abdecken. Die Berechnung erfolgt durch das Verhältnis der ausgeführten Anweisungen zur Gesamtzahl der Anweisungen im Code. Das Ziel besteht darin, einen hohen Überdeckungsgrad zu erreichen, um sicherzustellen, dass der Code umfassend getestet wurde, potenzielle Fehler und Schwachstellen somit aufgedeckt werden.

Historischer Hintergrund

Die Anweisungsüberdeckung entstand in der Software-Entwicklung der 1960er und 1970er Jahre als Antwort auf die steigende Komplexität von Software-Systemen. Neue Methoden für die Überprüfung und Validierung von Software wurden notwendig, und so entwickelten sich verschiedene Formen der Code-Überdeckung. Die Anweisungsüberdeckung hat sich dabei als eine der grundlegenden und am weitesten verbreiteten Techniken etabliert.

Anwendung der Anweisungsüberdeckung

Für eine effektive Anweisungsüberdeckung ist die Auswahl repräsentativer Testfälle entscheidend. Diese Testfälle sollten alle Teile des Codes abdecken. Nach ihrer Anwendung auf den Code erfolgt die Messung des Überdeckungsgrads durch spezielle Tools. Die Ergebnisse zeigen auf, welche Teile des Codes getestet wurden und welche noch ungetestet sind. Basierend auf dieser Analyse verbessern Entwickler die Testfälle und optimieren die Testabdeckung.

Praktische Beispiele

Ein anschauliches Beispiel für die Anwendung bietet ein Programm zur Berechnung der Fakultät einer Zahl. Der Code beinhaltet verschiedene Anweisungen, inklusive Schleifen und bedingten Anweisungen. Verschiedene Testfälle, die sowohl gültige als auch ungültige Eingaben berücksichtigen, helfen dabei, den Überdeckungsgrad des Codes zu messen und zu optimieren.

Interaktiver Fakultätsrechner

Bedienungsanleitung: Fakultätsrechner

Der Fakultätsrechner ermöglicht die einfache Berechnung der Fakultät einer eingegebenen Zahl. Die Fakultät einer Zahl definiert sich als das Produkt aller positiven ganzen Zahlen bis zu dieser Zahl. Beispielsweise ergibt die Fakultät von 5 (5!) das Produkt 5 * 4 * 3 * 2 * 1 = 120.

Anwendung des Fakultätsrechners:

1. Zahl eingeben: Im vorgesehenen Eingabefeld, markiert mit „Geben Sie eine Zahl ein:“, erfolgt die Eingabe der Zahl, deren Fakultät zu berechnen ist. Zu beachten ist, dass es sich um eine nicht-negative ganze Zahl handeln sollte.
2. Berechnung initiieren: Durch einen Klick auf den „Berechnen“-Button, positioniert direkt unterhalb des Eingabefeldes, startet die Berechnung.
3. Ergebnis einsehen: Unmittelbar nach der Betätigung des „Berechnen“-Buttons erscheint das Ergebnis unterhalb desselben. Es zeigt sich in Form eines Satzes wie „Die Fakultät von [eingegebene Zahl] ist [Ergebnis].“
4. Fehler: Bei Eingabe einer ungültigen Zahl (z.B. einer negativen Zahl oder einer Nicht-Zahl)

Zusätzliche Hinweise:

• Der Rechner verarbeitet ausschließlich ganze Zahlen. Dezimalzahlen oder andere Zeichen gelten als ungültig.
• Die Fakultät von 0 beträgt immer 1, entsprechend der mathematischen Definition.
• Bei Eingabe sehr großer Zahlen ist Vorsicht geboten, da die Berechnung der Fakultät rasch zu extrem hohen Werten führen und dies einen Überlauf verursachen kann.

Vorteile und Grenzen der Anweisungsüberdeckung

Die Anweisungsüberdeckung bietet zahlreiche Vorteile, darunter eine verbesserte Codequalität und die Identifizierung ungetesteter Codebereiche. Zudem unterstützt sie bei der Einhaltung von Compliance-Anforderungen. Allerdings garantiert ein hoher Überdeckungsgrad nicht automatisch eine hohe Codequalität oder die Entdeckung aller Fehler.

Welche Software kann dafür genutzt werden?

Die Überwachung und Analyse der Anweisungsüberdeckung ist ein entscheidender Teil des Software-Testprozesses. Verschiedene Werkzeuge stehen zur Verfügung, um Entwicklern bei dieser Aufgabe zu helfen. Hier sind einige der populärsten:

• JaCoCo (Java Code Coverage): Ein weitverbreitetes Tool für Java-Anwendungen, das sich in Maven und Gradle Projekte integrieren lässt und detaillierte Berichte über die Testabdeckung erstellt. (Siehe meinen Beitrag über JaCoco)
• Istanbul: Eine populäre Wahl für JavaScript-Anwendungen, die mit verschiedenen Test-Frameworks wie Mocha und Jest arbeiten kann.
• Cobertura: Ein weiteres Tool für Java, das aus dem JUnit Test Framework heraus funktioniert und umfassende Berichte über die Codeabdeckung erstellt.
• gcov: Ein Tool, das mit GCC (GNU Compiler Collection) zusammenarbeitet, um Codeabdeckungsinformationen für C, C++ und Fortran Programme zu liefern.
• dotCover: Ein Code-Abdeckungswerkzeug von JetBrains für .NET-Anwendungen, das sich nahtlos in Visual Studio und Rider integrieren lässt.
• OpenCover: Ein freies und Open-Source-Code-Abdeckungswerkzeug für .NET, das ausführliche Berichte über die Codeabdeckung erstellt.
• Clover: Ein Code-Abdeckungswerkzeug für Java, das sich in Ant, Maven und Grails integrieren lässt und reichhaltige, interaktive Berichte liefert.
• lcov: Ein front-end für gcov, das dazu dient, die Codeabdeckung von C, C++ und Fortran Programmen zu visualisieren.
• SonarQube: Ein umfassendes Werkzeug für die kontinuierliche Inspektion der Codequalität, das auch detaillierte Informationen über die Codeabdeckung liefert. (Siehe meinen Beitrag über SonarQube)
• Visual Studio: Die integrierte Entwicklungsumgebung (IDE) von Microsoft bietet eingebaute Funktionen zur Überprüfung der Codeabdeckung für .NET-Anwendungen. (Siehe meinen Beitrag über Visual Studio Code)

Die Wahl des richtigen Werkzeugs hängt von verschiedenen Faktoren ab, einschließlich der verwendeten Programmiersprache, des vorhandenen Test-Frameworks und der persönlichen oder teambasierten Vorlieben. Es ist wichtig, das Werkzeug auszuwählen, das am besten zu den Anforderungen des Projekts passt.

Fazit

Die Anweisungsüberdeckung ist ein wesentliches Instrument im Software Testing, um die Qualität und Zuverlässigkeit von Software-Produkten zu gewährleisten. Durch die sorgfältige Auswahl von Testfällen, die konsequente Durchführung von Tests und die Analyse der Ergebnisse lassen sich Schwachstellen aufdecken und die Software kontinuierlich verbessern. Mit den richtigen Tools und Praktiken ermöglicht die Anweisungsüberdeckung Entwicklern, hohe Standards in der Softwareentwicklung zu erreichen und zu halten.

Der Beitrag Anweisungsüberdeckung – Weil jeder Codeabschnitt zählt! erschien zuerst auf CEOsBay.

Beim statischen Test handelt es sich um eine Methode der Softwareprüfung, die eine Analyse des Quellcodes oder der Dokumentation durchführt, ohne dass man das Programm ausführt. Sie untersucht also den Code und die Softwarestruktur, um mögliche Fehler, Probleme oder Diskrepanzen aufzudecken.

Ein großer Vorteil von statischen Tests ist, dass man sie bereits in den frühen Phasen des Softwareentwicklungslebenszyklus anwenden kann. Damit lassen sich potenzielle Fehler oder Schwachstellen identifizieren, bevor man ihnen im Entwicklungsverlauf als schwerwiegende Probleme wieder begegnet.

Es gibt verschiedene Methoden für statische Tests, darunter:

1. Manuelle Überprüfungen: Hier prüfen Entwickler den Code manuell auf Fehler oder Diskrepanzen. Diese Methode ist zwar zeitaufwendig, kann aber hilfreich sein, um Logikfehler oder andere menschliche Fehler zu erkennen.
2. Automatisierte Überprüfungen: Hierbei verwendet man spezielle Tools, um den Code automatisch auf Fehler oder Diskrepanzen zu überprüfen. Diese Tools sind in der Lage, bestimmte Fehlermuster zu erkennen und können dabei helfen, mögliche Schwachstellen im Code aufzudecken.
3. Walkthroughs, technische Reviews und Inspektionen: Bei diesen strukturierten Überprüfungsprozessen prüft ein Team von Entwicklern den Code auf Inkonsistenzen, Fehler oder Mängel.
4. Formale Verifikationsmethoden: Diese Methoden, die oft in sicherheits- oder missionskritischen Umgebungen eingesetzt werden, verwenden mathematische Techniken zur Überprüfung der Korrektheit des Codes.

Tools für statische Tests

Es gibt eine Vielzahl von Tools, die bei statischen Tests zum Einsatz kommen können. Hier sind einige der bekanntesten:

1. SonarQube: Dieses Open-Source-Tool bietet eine kontinuierliche Inspektion des Codequalität. Es deckt eine breite Palette von Programmiersprachen ab und kann zur Erkennung von Code-Smells, Bugs und Sicherheitslücken genutzt werden. (Siehe auch meinen Beitrag über SonarQube)
2. PMD (Programming Mistake Detector): Ein weiteres Open-Source-Tool, das dazu dient, häufige Programmierfehler zu erkennen. Es unterstützt eine Vielzahl von Sprachen, darunter Java, JavaScript und Apex.
3. Checkstyle: Dieses Tool ist speziell für Java entwickelt und hilft bei der Einhaltung von Codierungsstandards und -konventionen.
4. FindBugs: Ein weiteres Tool für Java, das bytecodes (anstatt des Quellcodes) analysiert, um Fehlermuster zu finden.
5. ESLint: Ein sehr beliebtes Tool für JavaScript, das dazu dient, problematischen Code zu erkennen, der nicht den festgelegten Regeln entspricht.
6. Pylint: Dieses Tool wird zur statischen Code-Analyse für Python-Code verwendet. Es prüft, ob ein Modul den festgelegten Codierungsstandard erfüllt.
7. Coverity: Ein proprietäres Tool, das eine breite Palette von Sprachen abdeckt und eine gründliche statische Analyse durchführt. Es ist besonders nützlich für größere Codebasen und kommerzielle Projekte.
8. CodeClimate: Eine cloudbasierte Plattform, die Qualität, Sicherheit und technische Schulden in Echtzeit überwacht und sichtbar macht.

Man sollte beachten, dass kein Tool perfekt ist und jedes seine Stärken und Schwächen hat. Daher ist es in der Praxis üblich, mehrere Tools einzusetzen, um eine umfassendere Code-Analyse zu gewährleisten.

Fazit

Statische Tests sind ein integraler Bestandteil des Softwarequalitätsmanagements. Sie verbessern nicht nur die Qualität des endgültigen Produkts, sondern tragen auch dazu bei, den Entwicklungsprozess effizienter zu gestalten. Durch die frühzeitige Identifizierung und Behebung von Fehlern kann man Entwicklungszeiten und -kosten reduzieren und die Kundenzufriedenheit erhöhen.

Als Fazit lässt sich festhalten, dass statische Tests ein unverzichtbares Werkzeug für jede Organisation sind, die sich auf die Entwicklung von Software konzentriert. Durch den Einsatz dieser Prüfungsmethoden können Entwicklerteams die Qualität ihrer Produkte sicherstellen und gleichzeitig ihre Effizienz steigern.

Der Beitrag Statische Tests – Dynamischer als gedacht erschien zuerst auf CEOsBay.