Warum braucht es eine Automatisierung von Softwaretests für Nutzeranforderungen?

Bei der wega gibt es viele Aktivitäten rund um die Software-Validierung. Dabei geht es darum einen formalen Nachweis für das ordnungsgemässe Funktionieren von Anwendungen zu erstellen. Dies ist insbesondere in regulierten pharmazeutischen Umgebungen ein ‘Muss’ um die Anwendung benutzen zu dürfen.

Eine der Aktivitäten in diesem Validierungsprozess ist die manuelle Ausführung von Testskripten und damit die Befolgung genau definierter Testschritte in dem zu validierenden System. Bei diesen Skripten handelt es sich um seitenlange Anweisungen, die Schritt für Schritt sehr präzise ausgeführt werden müssen.

• Als einige von uns dies zum ersten Mal taten, hatten wir gemischte Gefühle und Gedanken:
• Wow, das erfordert wirklich meine ganze Konzentration.
• Oh nein, ich habe gerade Schritt 9 übersprungen!
• Mir ist langweilig. Wie kann das sein? Es ist eine Herausforderung und es ist aufregend, diese Anwendung zu entdecken. Aber trotzdem ist diese Aufgabe sehr ermüdend. Ich fühle mich wie ein Roboter...

Und das war das Zauberwort: "Roboter"! Versuchen wir es doch zu automatisieren!

Überlegungen darüber, was automatisiert werden kann und was nicht, und wo Maschinen besser sind als Menschen, haben uns eine neue und faszinierende Art des Testens eröffnet. Wir begannen auch, den Unterschied zwischen Testen und Checken zu verstehen, wie es zum Beispiel auf tutorialspoint beschrieben wird.

Im Gegensatz zum Checken beinhaltet das Testen die Erkundung des Systems, um zu bewerten, ob es sich wie erwartet verhält, ob die Benutzer sich damit wohlfühlen und bei ihren Aufgaben durch das System unterstützt werden, ob mögliche menschliche Fehler bei der Handhabung des Systems akzeptabel sind, ob die Qualität des Systems den Erwartungen entspricht, ob das Aussehen und die Bedienung ansprechend sind und um letztendlich ein ganzheitliches Feedback über das zu testende System zu geben. Testen ist ein kreativer und forschender Prozess, der menschliches Urteilsvermögen, Erfahrung und Können erfordert. Das lässt sich nicht automatisieren.

Beim Checken hingegen wird überprüft, ob ein System oder eine Komponente eine Reihe von vordefinierten Anforderungen oder Spezifikationen erfüllt. Mit Hilfe von Skripten werden die tatsächlichen Ergebnisse eines Tests mit den erwarteten Ergebnissen verglichen, um festzustellen, ob das zu testende System korrekt funktioniert. Das Prüfen ist ein strukturierter und verfahrenstechnischer Prozess, der mit einem Testautomatisierungswerkzeug ausgeführt werden kann.

Aber auch wenn eine genaue Schritt-für-Schritt-Beschreibung in einem Testskript nach dieser Definition automatisiert werden kann - ist das wirklich sinnvoll?

Wie so oft lautet die Antwort: Es kommt darauf an - und das stimmt, es kommt auf die Ziele an, die Sie mit der Testautomatisierung erreichen wollen.

Bislang haben wir drei verschiedene Ziele beobachtet, die mit Testautomatisierung erreicht werden können:

1. Reduzierung des Testaufwands und der Kosten bei gleichzeitiger Erhöhung der Zuverlässigkeit, wenn Sie einen Anwendungsfall haben, bei dem dasselbe Testskript wiederholt ausgeführt werden muss. Das ist zum Beispiel für der Durchführung von Regressionstests gegeben.
2. Die Verkürzung der Testausführungszeit kann für sich genommen auch schon wertvoll sein. Wenn Sie zum Beispiel in der Situation sind, wo ein Stück Software geliefert wurde, und das darauffolgende Testen zeitnah und schnell ausgeführt werden muss, kann ein automatisiertes Testskript die Testausführungszeit im Vergleich zu manuellen Tests erheblich verkürzen.
3. Erhöhung der Zuverlässigkeit und der Nutzerzufriedenheit durch die Implementierung einer Systemüberwachung: Die Digitalisierung der Biowissenschaften führt zur Schaffung von Anwendungsökosystemen, die mehr oder weniger in Echtzeit miteinander kommunizieren müssen. Wenn es sich dabei um Anwendungen handelt, die als SaaS verkauft werden, wird es schwieriger, Releases und ihre Auswirkungen auf das gesamte Ökosystem zu verwalten. Wenn wir die Tatsache einbeziehen, dass IT-Aktivitäten wie Patching und Wartung auch ausserhalb der Bürozeiten stattfinden können, summieren sich viele Faktoren, die sich unserer Kontrolle entziehen und möglicherweise wichtige tägliche Geschäftsprozesse zum Stillstand bringen können. In einem solchen Fall scheint uns der Mehrwert der Testautomatisierung enorm zu sein: Es ist sicherlich eine grössere Anfangsinvestition, die Testskripte zu entwickeln die es Ihnen ermöglichen, alle wichtige Prozesse abzudecken, aber wenn diese einmal eingerichtet sind, spricht nichts dagegen, die Durchführung aller Tests jedes Wochenende oder sogar jede Nacht zu planen! Sie können Ihr Tool so programmieren, dass es Ihnen bei der Entdeckung eines Fehlers eine Benachrichtigung schickt, so dass Sie im Vorfeld handeln können; vielleicht können Sie das Problem lösen, bevor die Benutzer überhaupt merken, dass es ein Problem gibt, oder im schlimmsten Fall können Sie sie zumindest warnen, dass das Problem bekannt ist und bearbeitet wird, und so gleichzeitig eine Menge Supportanfragen vermeiden.

Zusammenfassend möchten wir einige zusätzliche Erfahrungen hervorheben, die wir gemacht haben:

• Schon beim Schreiben von automatisierten Testskripten können Sie das System sehr genau testen. Das Skript muss bis ins letzte Detail definiert werden und kann nicht mehr oder weniger beschrieben werden, wie es in Skripten für die manuelle Ausführung der Fall sein könnte.
• Fehler im Testskript können schnell erkannt werden, wenn Sie automatisierte Testskripte schreiben: Da die Testausführung sehr schnell ist, können Sie sie wiederholt ausführen, um die Qualität Ihres Skripts zu überprüfen. Im Gegensatz dazu werden Fehler im Testskript für die manuelle Ausführung geprüft, indem ein Tester jeden Schritt durchklickt und überprüft, ob es für Menschen verständlich und eindeutig geschrieben ist.
• Und nicht zu vernachlässigen: Das Schreiben automatisierter Tests macht Spass! Anders als bei der manuellen Testskripten können wir nun beobachten, wie sich die Maus in der zu testenden Anwendung bewegt und klickt. Nachdem wir Stunden damit verbracht haben, dies manuell zu tun, ist dies eine ganz besondere Befriedigung.