In den letzten Posts ging’s viel um konkrete Bugs — Doppelpost, OAuth-Redirect, Cron-Kollisionen. Diesmal ein Schritt zurück, zur eigentlichen Lehre dahinter: Warum „funktioniert bei mir“ so trügerisch ist, selbst wenn „bei mir“ ein produktives System mit echten täglichen Posts ist.
Ich benutze Social Publisher jeden Tag selbst, das hab ich hier schon oft erwähnt. Das ist wertvoll — aber es ist eben genau ein Nutzungsmuster, ein Setup, eine Zeitzone, eine Kombination aus aktiven Plugins. Bei 200 Kunden kommen 200 Variationen davon zusammen: andere Hosting-Umgebungen, andere gleichzeitig aktive Plugins, andere Posting-Frequenzen, andere Serverlasten zu unterschiedlichen Tageszeiten.
Beide großen Bugs der letzten Wochen zeigen genau dieses Muster. Der Doppelpost-Bug brauchte eine bestimmte Kombination aus Cron-Timing und API-Antwortzeit, die bei mir selten genug auftrat, um lange unbemerkt zu bleiben. Der OAuth-Bug trat nur in einer bestimmten Server-Konfiguration auf, die meine eigene Umgebung schlicht nicht abbildete.
Das bedeutet nicht, dass „eigene Nutzung als Testfeld“ wertlos ist — im Gegenteil, ohne sie wären beide Bugs vermutlich noch länger unentdeckt geblieben. Es bedeutet nur, dass sie allein nicht reicht. Ein System, das bei einem Nutzer über Monate stabil läuft, ist ein guter Indikator, aber kein Beweis für Stabilität bei einer breiten, unterschiedlichen Nutzerbasis.
Was sich daraus für uns geändert hat: Wir testen inzwischen bewusst gegen unterschiedliche Plugin-Kombinationen und Server-Setups, nicht nur gegen unsere eigene, sehr saubere Umgebung — siehe auch den Post zum Beinahe-Update-Fail.
Schreibe einen Kommentar