Ein Mock statt eines echten SMS-Codes im Registrierungstest prüft das Formular, aber nicht das gesamte Szenario: Er erkennt weder Zustellverzögerungen noch ein unerwartetes Codeformat eines bestimmten Dienstes noch einen Abbruch beim Eingabeschritt der Bestätigungs-E-Mail. Ein Durchlauf mit einem echten Code ist die einzige Möglichkeit, sicherzustellen, dass die Registrierungskette von der ersten Nummernanfrage bis zur Anmeldung im Konto funktioniert.
Warum ein Szenario mit echtem Code nötig ist
Ein Mock-Code kommt immer sofort und im erwarteten Format an – die Realität sieht anders aus. Der Mobilfunkanbieter kann die Zustellung um 20–40 Sekunden verzögern, der Code kann in zwei SMS statt in einer eintreffen, die Bestätigungs-E-Mail kann auf Seiten des E-Mail-Dienstes in einer Moderationswarteschlange landen. Keines dieser Szenarien lässt sich mit einem Mock nachstellen, und gerade sie bringen am häufigsten eine Produktiv-Registrierung zum Absturz, die zuvor monatelang nicht angefasst wurde.
Das zweite Argument ist die Integration als Ganzes. Ein Test mit echtem Code prüft nicht nur das Parsen der SMS, sondern das Zusammenspiel: Nummernanfrage über die API, Zustellung des Codes an Ihre Seite, Extraktion des Codes aus dem Text, Eingabe ins Formular, Finalisierung der Aktivierung. Ein Abbruch an einer beliebigen Stelle ist ein Fehler, den man besser in der CI abfängt als in der Produktion.
Wie der durchgängige Lauf aufgebaut ist
Das Szenario besteht aus drei Schritten. Der erste ist die Anfrage einer Nummer oder E-Mail-Adresse über die API, bevor die Registrierung auf der Zielplattform beginnt. Der zweite ist das Warten auf den Code: Der Code kommt nicht sofort, deshalb fragt die Pipeline den Status in einem festen Intervall ab, anstatt mit einem einzigen Timeout abzuwarten. Der dritte ist die Finalisierung: Der Code wird ins Formular eingetragen, die Registrierung wird abgeschlossen, und die Nummer oder Adresse wird als verwendet markiert, damit keine erneute Anfrage nach einem Code gesendet wird, der nicht mehr kommen wird.
Das Timeout für das Warten auf den Code wird mit Puffer gegenüber der üblichen Zustellung angesetzt: Kommt der Code normalerweise innerhalb von 10–15 Sekunden an, ist es sinnvoll, das Timeout in der Pipeline auf 60–90 Sekunden zu setzen statt auf 15. Eine Wiederholung der Code-Anfrage ist einmal sinnvoll, nach dem ersten abgelaufenen Timeout – der zweite Versuch fängt eine seltene Verzögerung beim Anbieter ab, ein dritter bedeutet in der Regel ein echtes Problem in der Kette und keine Schwankung bei der Zustellung.
Warum das ein separater, seltener Lauf ist und nicht Teil jedes Commits
Ein Test mit echtem Code kostet bei jedem Start Geld – die Nummer oder Adresse wird unabhängig vom Ergebnis abgerechnet – und hängt von einem externen Dienst ab, dessen Verzögerung Sie nicht kontrollieren. Ihn bei jedem Commit auszuführen bedeutet, für jeden Push in den Branch zu zahlen und zufällige rote Builds zu erhalten, die nicht am Code liegen, sondern an einer externen Zustellverzögerung.
Ein praxistaugliches Schema: Schnelle Tests mit Mock laufen in der regulären Pipeline bei jedem Commit, das Szenario mit echtem Code wird in einen separaten, seltenen Lauf ausgelagert: vor dem Release, einmal täglich nach Zeitplan oder manuell vor dem Merge in den Hauptbranch. So werden echte Regressionen in der Zustellkette erkannt, ohne die Kosten und die Dauer des regulären Builds aufzublähen.
Trennung von Testdaten und Produktivdaten
Nummern und E-Mail-Adressen für Autotests sollten aus einem separaten Pool stammen und nicht aus demselben Guthaben, das für Produktivaufgaben verwendet wird: Eine Vermischung erschwert die Kostenerfassung und birgt das Risiko, dass ein Testlauf versehentlich eine Nummer wegnimmt, die für einen Produktivprozess reserviert war. Vom Test angelegte Konten sollten Sie mit einem eigenen Präfix oder einer eigenen E-Mail-Domain kennzeichnen und nach Zeitplan bereinigen – andernfalls sammeln sich Testeinträge in denselben Tabellen wie die Produktivnutzer und verfälschen die Analytik.
Kostenerfassung für die Läufe
Jeder Lauf mit echtem Code bedeutet eine Abbuchung für die Nummer oder E-Mail-Adresse plus die Ausführungszeit in der Pipeline. Sinnvoll ist es, die Kosten eines vollständigen Szenarios zu berechnen und mit der Häufigkeit der Läufe zu multiplizieren: Einmal täglich ist eine Größenordnung des Budgets, bei jedem Commit in einem aktiven Branch eine ganz andere, um ein Vielfaches höhere, ohne proportionalen Nutzenzuwachs. Ein vernünftiger Richtwert: Die seltenen Läufe mit echten Codes sollten häufig genug sein, um Regressionen vor dem Release zu erkennen, aber selten genug, damit die CI-Kosten nicht mit den Kosten des Dienstes selbst konkurrieren.
Häufig gestellte Fragen
Kann man vollständig auf Mocks zugunsten echter Codes verzichten?
Das ist nicht sinnvoll: Ein Mock ist schnell, kostenlos und eignet sich dazu, bei jedem Commit die Parsing-Logik und das Formular zu prüfen. Der echte Code wird für ein separates End-to-End-Szenario benötigt, das Integrations- und Zustellprobleme erkennt, und nicht dafür, den Anwendungscode bei jeder Änderung zu testen.
Was tun, wenn der Code innerhalb des vorgesehenen Timeouts nicht eintrifft?
Ein einmaliger erneuter Anfrageversuch ist ein sinnvoller erster Schritt: Er fängt eine zufällige Verzögerung beim Anbieter ab. Kommt der Code auch nach der Wiederholung nicht, sollte der Test deutlich und eindeutig fehlschlagen, statt bis zum globalen Timeout der Pipeline zu hängen – das spart Analysezeit und weist klar auf ein Problem in der Zustellkette hin und nicht auf eine Schwankung.
Wie oft sollte der Lauf mit echten Codes gestartet werden?
Praktikabel ist ein Lauf einmal täglich nach Zeitplan plus ein verpflichtender Start vor dem Release in den Hauptbranch. Dieser Rhythmus erkennt Regressionen in angemessener Zeit und hält die Ausgaben für Nummern und Adressen planbar, ohne sie an die Zahl der Commits in der aktiven Entwicklung zu koppeln.
Wie die Nummernanfrage und die Abfrage des Code-Status auf API-Seite funktionieren, ist in der API-Dokumentation beschrieben. Eine Nummer für den ersten Testlauf erhalten Sie im Bereich OTP, und das Prinzip der Statusabfrage über die API ist dasselbe wie bei der IP-Rotation per API. Die Kosten für regelmäßige Läufe lassen sich bequem im Transaktionsverlauf verfolgen.