Der ehrliche Weg, Social Proof zu testen, ist eine Aufteilung auf Besucherebene, bei der die Hälfte das Widget sieht und die andere Hälfte nicht, gemessen an abgeschlossenen Bestellungen, über mindestens zwei volle Wochenzyklen, mit Erfolgskennzahl und Abbruchregel schriftlich festgehalten, bevor du startest. Alles Weitere in diesem Beitrag sind Details zu diesen vier Anforderungen und zu den Arten, wie sich ein solcher Test selbst schönrechnet.
Warum Social-Proof-Tests leicht schiefgehen
Social-Proof-Widgets sind klein, schnell eingeschaltet, und das Dashboard des Anbieters meldet meist eine schmeichelhafte Zahl. Das ist ein Rezept für Wunschdenken. Die konkreten Fallen:
- Klicks auf den Toast messen statt Bestellungen. Klicks sind Engagement, kein Umsatz.
- Vorher und nachher vergleichen statt gleichzeitiger Gruppen. Saisonalität, ein Newsletter-Versand oder eine Preisänderung überlagern den Effekt.
- Eine „unterstützt“- oder „beeinflusst“-Kennzahl als Steigerung lesen. Ein Käufer, der vor dem Kauf einen Toast gesehen hat, hätte oft ohnehin gekauft.
- Aufhören, wenn es gut aussieht. Zwischendurch nachschauen und früh abbrechen erhöht die Zahl falscher Positiver.
- Die Frequenz mitten im Test ändern. Dann testest du zwei Dinge.
Das Dashboard von Provedly meldet proof-unterstützte Bestellungen, also die Zahl der Bestellungen, bei denen der Käufer vor dem Kauf eine Benachrichtigung gesehen hat, zugeordnet über die Besucher-ID innerhalb eines 30-Tage-Fensters. Wir melden das als Zählung, nie als modellierte oder geschätzte Steigerung, gerade weil es keine Steigerungszahl ist. Sie sagt dir, wie viele Käufer damit in Kontakt kamen. Sie sagt dir nicht, wie viele deswegen gekauft haben. Dafür brauchst du eine Kontrollgruppe. /de/blog/measuring-proof-assisted-orders geht darauf ein, was die Kennzahl bedeutet und was nicht.
Den Test aufsetzen
Teile auf Besucherebene, nicht auf Seitenebene. Weise jeden Besucher beim ersten Besuch A oder B zu und lass ihn für die gesamte Dauer dort, auch über Sessions hinweg innerhalb des 30-Tage-Fensters. Aufteilungen pro Seite oder pro Session sind undicht: Ein Besucher sieht das Widget am Dienstag, ist am Donnerstag in der Kontrollgruppe und kauft.
Geräte- und URL-Targeting von Provedly sind dafür da, den Einsatzbereich des Widgets festzulegen, nicht um Traffic aufzuteilen. Nutze dein Experimentier-Tool, die Testfunktion deiner Plattform oder ein einfaches Cookie-basiertes Flag, das steuert, ob das Script-Tag geladen wird. Bei Shopify-Shops kann das Theme App Embed an eine Theme-Einstellung gekoppelt werden, wenn dein Test-Tool Varianten auf Theme-Ebene unterstützt.
Leg die Kennzahl zuerst fest. Schreib sie auf: Conversion-Rate zur abgeschlossenen Bestellung, pro Besucher, über den Testzeitraum. Sekundäre Kennzahlen können der durchschnittliche Bestellwert und der Umsatz pro Besucher sein. Nimm Toast-Klicks, Verweildauer oder Scrolltiefe nicht als primäre Kennzahlen; sie bewegen sich leicht und bedeuten wenig.
Leg die Abbruchregel zuerst fest. Wähle Dauer oder Stichprobengröße, bevor du startest. Zwei volle Wochen sind für die meisten Shops das Minimum, weil sich Verhalten unter der Woche und am Wochenende unterscheidet. Vier sind besser. Wenn du einen Rechner für die Stichprobengröße nutzt, sagt er dir, wie viele Besucher pro Gruppe du brauchst, um den Effekt zu erkennen, der dich interessiert; bei einem kleinen Effekt auf einer mittelgroßen Website lautet die ehrliche Antwort oft „mehr, als du hast“, und das zu wissen ist besser, als einen Test ohne ausreichende Aussagekraft laufen zu lassen und ihn überzuinterpretieren.
Halte alles andere konstant. Keine Änderungen an der Frequenz, keine neuen Leisten, keine Textänderungen während des Tests. Wenn du etwas ändern musst, fang neu an.
Was du testen solltest
Der An/Aus-Test ist der, den du zuerst machst. Danach drehen sich die interessanten Fragen eher um Zurückhaltung als um Intensität.
| Test | A | B | Was du lernst |
|---|---|---|---|
| An/Aus | Kein Widget | Toasts, Standardlimits | Ob Social Proof überhaupt hilft |
| Frequenz | Limit 5 pro Session | Limit 2 pro Session | Ob weniger genauso gut funktioniert |
| Einsatzbereich | Alle Seiten | Nur Produktseiten | Wo Social Proof zählt |
| Verifizierung | Toasts mit Link „Verifizierter Kauf“ | Toasts ohne (in Provedly nicht möglich) | Siehe unten |
Die letzte Zeile steht dort, um einen Punkt zu machen. Du kannst diesen Test in Provedly nicht durchführen, weil das Verifizierungszeichen und sein Link zur öffentlichen Verifizierungsseite nicht optional sind. Wir sind vom Wert einer überprüfbaren Aussage überzeugt genug, um sie nicht als Variable zu behandeln, und die regulatorische Richtung seit der Regel der FTC zu gefälschten Testimonials von Ende 2024 legt nahe, dass die Alternative langfristig ohnehin keine Option ist.
Das Ergebnis lesen
Wenn B A mit einem Abstand schlägt, den deine Abbruchregel akzeptiert, hast du ein Ergebnis. Nenne die absoluten Conversion-Raten, den relativen Unterschied und das Konfidenzintervall, nicht nur „12 Prozent Steigerung“. Eine relative Zahl ohne Basisrate ist der Weg, auf dem kleine Effekte übertrieben werden.
Wenn das Ergebnis flach ist, ist auch das eine Information. Es kann bedeuten, dass dein Produkt den Anstoß nicht braucht oder dass dein Traffic überwiegend aus wiederkehrenden Käufern besteht, die dir bereits vertrauen. Stell das Widget auf ein niedriges Limit nur auf Produktseiten und mach weiter.
Wenn B verliert, glaub es. Widgets können nerven, besonders auf Mobilgeräten, und /de/blog/mobile-social-proof-design enthält die Layout-Änderungen, die du vor einem neuen Test ausprobieren kannst.
Gegenprüfung mit proof-unterstützten Bestellungen
Während des Tests gilt die Zahl proof-unterstützter Bestellungen im Dashboard nur für Gruppe B, da A nichts gesehen hat. Eine nützliche Plausibilitätsprüfung: Wenn der Test zeigt, dass B besser konvertiert, sollte die proof-unterstützte Zahl einen nennenswerten Anteil der Bestellungen von B ausmachen. Wenn B gewinnt, aber kaum jemand in B vor dem Kauf tatsächlich einen Toast gesehen hat, ist etwas anderes im Spiel, und du solltest deiner Aufteilung misstrauen.
Eine Countdown-Leiste testen
Leisten sind schwerer ehrlich zu testen, weil ein Countdown mit echtem Enddatum an ein Angebot gebunden ist und das Angebot selbst die Conversion bewegt. Teste die Anwesenheit der Leiste, nicht das Angebot: Beide Gruppen bekommen den Sale, nur B bekommt die Leiste. Lass den Test über die gesamte Sale-Dauer laufen. /de/blog/honest-countdown-timers erklärt die Leistentypen und welche dafür geeignet sind.
Häufige Fragen
Kann Provedly den Traffic für mich aufteilen?
Nein. Provedly legt fest, wo und wem das Widget angezeigt wird, aber die zufällige Zuweisung gehört in ein Tool, dessen Aufgabe Experimente sind, damit die Aufteilung unabhängig von dem ist, was getestet wird.
Wie viele Bestellungen brauche ich, bevor ein Test etwas aussagt?
Das hängt von deiner Basisrate und der Effektgröße ab, die dich interessiert. Ein Rechner für die Stichprobengröße gibt dir eine Zahl; wenn sie über den Bestellungen liegt, die du in einem Monat erwartest, lass den Test länger laufen oder akzeptiere, dass du nach einem Richtungssignal statt nach einem Beweis suchst.
Sind „proof-unterstützte Bestellungen“ dasselbe wie die Steigerung durch das Widget?
Nein. Es ist eine Zählung der Käufer, die zuerst eine Benachrichtigung gesehen haben. Eine Steigerung erfordert eine Kontrollgruppe, und genau die beschreibt dieser Beitrag.
Richte ein Widget mit Standardlimits ein und führe einen ehrlichen An/Aus-Test durch; los geht's unter /register.