End-to-End-Tests versus Unit-Tests, sollten Tests entkoppelt werden?

In unserem Unternehmen stellen wir normalerweise sicher, dass wir einen End-to-End-Test für unsere Websites / Web-Apps schreiben. Das heißt, wir greifen auf eine URL zu, füllen ein Formular aus, senden das Formular an eine andere URL und überprüfen die Ergebnisse der Seite. Wir tun dies, um die Formularvalidierung zu testen, um zu überprüfen, ob die HTML-Vorlagen die richtigen Kontextvariablen aufweisen usw.

Wir verwenden es auch, um die zugrunde liegende Logik indirekt zu testen.

Mir wurde von einem Mitarbeiter gesagt, dass der Grund dafür ist, dass wir die zugrunde liegende Implementierung jederzeit herausreißen und ändern können, solange die End-to-End-Tests erfolgreich sind.

Ich frage mich, ob diese Art der Entkopplung Sinn macht oder ob es nur eine Möglichkeit ist, das Schreiben von Tests für kleinere Codeeinheiten zu vermeiden.

End-to-End-Tests sind ebenfalls erforderlich. Wie sonst können Sie wissen, dass Sie alle Einheiten korrekt miteinander verbunden haben? Mit sehr einfachem Code ist es möglich, alle Pfade durch den Code nur mit Ende-zu-Ende-Tests zu testen, aber je mehr Ebenen Sie erhalten, desto teurer wird dies in untragbarer Weise.

Angenommen, Sie haben drei Ebenen mit jeweils fünf möglichen Pfaden. Zum Testen aller Pfade durch die gesamte Anwendung sind 5 bis ³ End-to-End-Tests erforderlich. Sie können jedoch alle Pfade durch jede Einheit mit nur 5 bis 3 Einheitentests testen. Wenn Sie nur End-to-End-Tests durchführen, werden viele Pfade vernachlässigt, vor allem in Bezug auf Fehlerbehandlung und Randbedingungen.

Ja, End-to-End-Tests (oder Integrationstests) sind sehr sinnvoll, aber auch Komponententests. Idealerweise haben Sie beide, da beide in der Regel unterschiedliche Arten von Fehlern aufweisen. End-to-End-Tests sollten daher niemals eine Entschuldigung dafür sein, keine Komponententests durchzuführen.

Nach einigen weiteren Jahren des Programmierens und Bearbeitens von Projekten werde ich eine Antwort auf meine eigene Frage geben.

Ja, Sie sollten Komponententests schreiben. End-to-End-Tests sind schwerer zu schreiben und brüchig, insbesondere wenn sie auf UI-Komponenten basieren.

Wenn Sie ein Framework wie Django oder Rails (oder Ihre eigenen benutzerdefinierten Klassen) verwenden, sollten Sie eine Formularklasse haben, die die Validierung des Formulars übernimmt. Sie haben auch Ansichtsklassen, die gerenderte Vorlagen und das Formular anzeigen und GET- und POST-Anforderungen verarbeiten.

In einem End-to-End-Test würden Sie:

1. Holen Sie sich die URL
2. Füllen Sie das Formular mit gültigen Daten aus
3. Sende das Formular an die URL
4. Stellen Sie sicher, dass die Datenbank aktualisiert oder eine Aktion aufgrund des gültigen Formulars ausgeführt wurde

Sie testen viel Code und Ihre Berichterstattung wird ziemlich gut sein, aber Sie testen nur den glücklichen Pfad, wenn alles richtig läuft. Wie stellen Sie sicher, dass das Formular die richtige Validierung enthält? Was ist, wenn dieses Formular auf mehreren Seiten verwendet wird? Schreiben Sie noch einen End-to-End-Test?

Versuchen wir es noch einmal mit Unit-Tests:

1. Testen Sie die Methode view GET
2. Testen Sie die View-POST-Methode mit einem Fake / Mock-Formular
3. Testen Sie das Formular mit gültigen Daten
4. Testen Sie das Formular mit ungültigen Daten
5. Testen Sie die Nebenwirkungen des Formulars

Mit Unit-Tests testen Sie kleinere Codeteile, und die Tests sind spezifisch und einfacher zu schreiben. Wenn Sie dies mit TDD (Test Driven Development) kombinieren, erhalten Sie Code mit höherer Qualität.

Die Leichtigkeit, Unit-Tests zu schreiben, sollte nicht vernachlässigt werden, denn wenn Sie an einem Projekt arbeiten, für das es keine automatisierten Tests gibt, müssen Sie irgendwo anfangen. Das Starten mit Komponententests ist einfacher und schneller und ermöglicht es Ihnen, sofort nach Fehlern zu suchen, anstatt nur nach dem glücklichen Pfad.

Eigentlich sind End-to-End-Tests oder Integrationstests wichtiger als Unit-Tests, da sie sicherstellen, dass Sie ein voll funktionsfähiges System haben. Unit-Tests decken nicht den Integrationsteil eines Systems ab, was insbesondere bei großen Projekten eine komplizierte Aufgabe ist.

Wie bereits erwähnt, sollten Sie auch Unit-Tests durchführen, da es beim Integrationstest komplizierter ist, die Randfälle zu erfassen.

Es überprüft das Systemverhalten, während Unit-Tests das Verhalten des Geräts überprüfen. Die Vorteile und Kosten sind unterschiedlich. Du könntest den einen oder den anderen oder beide machen.

Bei meiner Arbeit machen wir Acceptance Test Driven Development ohne Unit-Tests, was sich ähnlich anhört, wie Sie es beschrieben haben. Wir begannen mit beidem und machten im Laufe der Zeit Schluss mit Unit-Tests, um die Kosten zu senken, die die Vorteile für uns übersteigen.

Abgesehen davon denke ich, dass die Kosten / Nutzen für Ihre Problemdomäne und -umgebung die Entscheidungen für jede Entwicklungspraxis, einschließlich verschiedener automatisierter Testpraktiken, beeinflussen sollten. Ich bevorzuge es, dass alle Praktiken empirische Beweise im Kontext ihrer Verwendung haben, um sie zu sichern.