Sollten Tester ihre Arbeit automatisieren?

Wir versuchen, unseren Testprozess einzurichten. Wir fragen uns, ob unsere Tester automatisierte Regressionstests entwickeln sollten oder ob die Entwickler dies tun sollten.

Und was ist mit anderen Arten von automatisierten Tests? Sollten Tester sie entwickeln?

Ich sage, die Tester sollten die automatisierten Tests entwickeln - sie haben den "äußeren Augenpaar" -Ansatz für den Code und werden (oder sollte das nur "vielleicht" sein?) Fehler erkennen, an die Sie nicht gedacht haben, geschweige denn damit umgehen .

Außerdem ist ihr Verständnis der funktionalen Anforderungen möglicherweise höher als das der Entwickler - also zwischen dem Hardcore-Low-Level-Wissen des Programmierers, aber nicht so hoch wie das des BA.

Wenn Sie es automatisieren können, automatisieren Sie es.

Lassen Sie die Tester frei, um die Dinge zu finden, die Sie nicht automatisieren können. Und wenn sie einen neuen Fehler finden, wenn er automatisiert und zu den automatisierten Tests hinzugefügt werden kann, fügen Sie ihn hinzu.

Meiner Meinung nach sind Entwickler und Tester für verschiedene Arten von Tests verantwortlich.

Der Entwickler sollte beim Schreiben der Logik auch Unit- und Integrationstests schreiben. Auf diese Weise kann der Entwickler sicherstellen, dass das, was er bisher geschrieben hat, wie beabsichtigt funktioniert. Darüber hinaus stehen diese Tests dem Entwickler weiterhin zur Verfügung, wenn er zukünftige Änderungen vornimmt. Sobald die Logik abgeschlossen ist, kann der Entwickler sicher sein, dass das Geschriebene funktioniert, wenn er die Spezifikationen versteht und an den Tester weitergegeben werden kann.

Ab diesem Zeitpunkt sollte der Tester dafür verantwortlich sein, systemweite Tests zu schreiben, die sicherstellen, dass die Geschäftslogik wie beabsichtigt funktioniert.

Angesichts der Tatsache, dass Entwickler häufig viel zu sehr mit dem Code verbunden sind, sollten Tester in der Lage sein, die Tests der Entwickler zu bereinigen, aber nicht umgekehrt.

Nach meiner Erfahrung unterscheidet sich die Art und Weise, wie ein Tester einen Testfall automatisch einrichtet und ausführt, tatsächlich von der Art und Weise, wie ein Entwickler dies tut. Die Tester werden mehr darüber nachdenken, wie sie die meisten Informationen aus dem Testfall herausholen, wie sie Tests schnell ausführen, wie sie die Tests wartbar halten und so weiter. Am wichtigsten ist, dass Tester Nuancen der Testabdeckung sehen, die Entwickler vermissen werden.

Wenn die Ressourcen für die Testentwicklung niedrig sind, können Entwickler helfen - aber ein Tester sollte seine Arbeit sorgfältig überprüfen. Entwickler sollten an Vorrichtungen und Testwerkzeugen arbeiten, bevor sie tatsächliche Testfälle schreiben, und Entwickler sollten niemals Testfälle für ihren eigenen Code schreiben. Wenn Entwickler beim Testen helfen, hat dies Vorteile: Entwickler werden anderen Teilen des Produkts ausgesetzt, und das Testen kann ihnen helfen, bessere Entwickler zu werden. Genau wie die Arbeit eines Junior-Entwicklers niemals ohne eine Codeüberprüfung auskommen würde, sollte die QA-Arbeit eines Entwicklers eine QA-Überprüfung von jemandem mit mehr Erfahrungstests erhalten.

Bearbeitet, um hinzuzufügen: Ich bin ein SDET mit 5 Jahren Erfahrung. Ich arbeite mit großartigen Entwicklern mit jeweils mehr als 10 Jahren Erfahrung zusammen und habe in letzter Zeit mit ihnen zusammengearbeitet, um einen Testengpass zu überwinden.

Eine Sache, die ich wirklich gerne sehen würde, sind solide Automatisierungstools für Tester, mit denen sie ihren Fortschritt effektiv über ein Testskript aufzeichnen und dieses Skript in Zukunft automatisch ausführen können. Insbesondere, wenn dadurch auch dasselbe Skript auf verschiedenen Betriebssystemversionen ausgeführt werden kann, ohne dass der Tester alle manuell durchgehen muss.

Leider macht keines der auf dem Markt befindlichen Tools für das Produkt, an dem ich arbeite, die Aufgabe. Es lohnt sich jedoch, dies zu berücksichtigen und zu prüfen, was auf dem Markt verfügbar ist, falls es etwas gibt, das für Ihre Arbeit geeignet ist.

Eine wichtige Unterscheidung, die hier wirklich wichtig ist, ist folgende: Prüfen Ihre Tester nur oder testen sie ?

Dieser Blog-Beitrag von Michael Bolton erklärt es besser, aber im Wesentlichen: Wollen sie lediglich das Verhalten bestätigen oder suchen sie nach Problemen mit dem System?

Ich denke, es ist auch nützlich, die Agile Testing Quadrants zu betrachten (Brian Marick hat diese ursprünglich beschrieben, aber ich bin auf sie in Lisa Crispins und Janet Gregorys "Agile Testing" -Buch gestoßen: Auch wenn Sie nicht einer Agile-Entwicklungsmethode folgen, denke ich die Die Unterscheidung zwischen Tests, die das Produkt kritisieren, und Tests, die das Team unterstützen, lohnt sich wirklich, wenn man über Automatisierung nachdenkt und versucht, einen Plan zu entwickeln, wer was und warum tut.

Beispielsweise fungieren von Entwicklern geschriebene Einheitenprüfungen als Änderungsdetektoren, sodass Sie Regressionen frühzeitig erkennen können, wenn sie regelmäßig erneut ausgeführt werden. Dies sind Tests, die das Team unterstützen. Regressionsprüfungen auf Systemebene, die automatisiert sind, damit sie regelmäßig und schnell erneut ausgeführt werden können, unterstützen das Team auch, indem sie Regressionen frühzeitig erkennen und die von Entwicklern durchgeführten Komponententests ergänzen. Dies gibt Ihren Testern Zeit für Tests, die das Produkt kritisieren - beispielsweise explorative Tests. Oder möglicherweise einige der automatisierten Prüfungen anwenden, um das Produkt einem Stresstest zu unterziehen.

Das andere, was ich an der von mir verlinkten Lisa Crispin-Präsentation wirklich mag, ist, dass sie darauf hinweist, dass Automatisierung auch zur Unterstützung manueller Tests verwendet werden kann - Erstellen von Testdaten, Automatisierung, um ein Szenario an den Punkt zu bringen, auf den Sie sich heute konzentrieren möchten Beispiel.

Wenn Sie diese beiden Artikel berücksichtigen, können Sie hoffentlich analysieren, welche Art von Tests Sie durchführen möchten, leichter herausfinden, welche für die Automatisierung geeignet sind, und herausfinden, welche Automatisierungsteile für Tester besser geeignet sind und welche von Entwicklern.