A/B-Testing & Experimente

A/B-Testing & Experimente Das zweitägige Seminar für alle, die im Shop nicht mehr nach Bauchgefühl entscheiden wollen: Sie lernen, aus einer Beobachtung eine prüfbare Hypothese zu machen, einen Test sauber aufzusetzen und ein Ergebnis zu lesen, ohne sich von einem schönen Prozentwert täuschen zu lassen. Am Ende wissen Sie, welche Änderung wirklich mehr Umsatz bringt.

A/B-Testing & Experimente auf einen Blick

• Format: 2 Tage Präsenz + Self-Learning Track
• Niveau: Basis bis Aufbau
• Teilnehmerzahl: Max. 16 Personen
• Sprache: Deutsch
• Zertifikat: AEI Teilnahmezertifikat
• Investition: 290,00 € zzgl. MwSt.

Die meisten Shops testen entweder gar nicht oder zu früh. Wer nicht testet, entscheidet auf Basis der lautesten Meinung im Raum. Wer zu früh testet, gewinnt Tests, die nichts bedeuten, und ändert danach Dinge, die im Nachhinein niemand mehr begründen kann.

Der Unterschied liegt selten im Werkzeug. Er liegt in der Frage: Was genau soll sich ändern, für wen, und woran würden Sie merken, dass es nicht funktioniert? Ein Test ohne diese drei Antworten ist eine Umfrage unter Besuchern, keine Erkenntnis.

Dieses Seminar arbeitet an genau dieser Stelle. Sie formulieren Hypothesen, die man widerlegen kann, legen Stichprobe und Laufzeit vor dem Start fest und lernen, was ein Ergebnis bedeutet und was nicht. Der Test selbst ist danach der einfache Teil.

Das nehmen Sie mit

• Ein Verfahren, um aus einer Beobachtung eine prüfbare Hypothese zu machen.
• Eine Faustregel für Stichprobe und Laufzeit, die Sie vor dem Start festlegen.
• Eine Liste der Fehler, die einen Test wertlos machen, bevor er begonnen hat.
• Einen Ablauf, um Ergebnisse zu lesen, ohne sie schönzureden.
• Ein Format, mit dem Testen zur Gewohnheit wird statt zum Projekt.

Ihre Lernziele

• Sie unterscheiden Situationen, in denen ein Test sinnvoll ist, von solchen, in denen er Zeitverschwendung wäre.
• Sie formulieren eine Hypothese mit einer klaren, messbaren Erwartung.
• Sie legen Stichprobe und Laufzeit so fest, dass das Ergebnis belastbar ist.
• Sie erkennen Signifikanz und verstehen, warum sie nicht dasselbe ist wie Relevanz.
• Sie lesen auch aus einem verlorenen Test eine Erkenntnis.

Die Hebel im Überblick

Ein Test beantwortet eine Frage, nicht alle. Wer in einem Test Titel, Preis und Button gleichzeitig ändert, weiß danach nur, dass das Paket gewirkt hat — oder nicht. Eine Variable pro Test ist keine Bequemlichkeit, sondern die Bedingung dafür, dass Sie etwas lernen.

Die Stichprobe entscheidet vor dem Start. Nach zwei Tagen abzubrechen, weil es gut aussieht, ist die häufigste Art, sich ein Ergebnis zu bauen. Wer Stichprobe und Laufzeit vorher festlegt, schützt sich vor sich selbst.

Signifikanz ist ein Wahrscheinlichkeitsmaß, keine Garantie. Ein signifikanter Test sagt, dass ein Unterschied wahrscheinlich nicht Zufall ist. Er sagt nicht, dass der Unterschied groß genug ist, um ihn auszurollen.

Verlierer sind die günstigeren Lehrer. Ein Test, der nichts verändert, kostet Zeit; ein Test, der etwas verhindert, spart Geld. Wer nur Gewinner dokumentiert, lernt nichts über sein Publikum.

Für wen ist dieses Seminar?

Für Menschen, die Änderungen im Shop begründen müssen, statt sie zu behaupten.

• Conversion- und E-Commerce-Manager, die Optimierung systematisch betreiben wollen.
• Marketing-Verantwortliche, die Budgets mit Ergebnissen verteidigen müssen.
• UX- und Content-Teams, die ihre Arbeit an Wirkung messen wollen.
• Shop-Betreiber, die schon Tests laufen lassen und die Ergebnisse nicht deuten können.

Grundkenntnisse in Web Analytics sind hilfreich, aber nicht Voraussetzung. Wer die Begriffe Sitzung und Conversion schon gehört hat, ist schneller; wer nicht, kommt im Seminar mit.

Nicht geeignet ist das Seminar für Teams, die eine Einführung in ein bestimmtes Testwerkzeug suchen. Wir arbeiten an der Frage und am Verfahren — das Werkzeug wechselt, die Denkweise bleibt.

Investition und Termine

Die Teilnahme kostet 290,00 € zzgl. MwSt., inklusive Self-Learning Track, Materialien und Teilnahmezertifikat. Es gibt sechs Termine pro Jahr in Berlin, Hamburg, Köln, München und live online sowie eine Inhouse-Variante für Teams. Alle Termine finden Sie in der Liste auf dieser Seite.

Für die Übungen arbeiten Sie mit Testdaten und einem Beispielshop, sodass Sie ohne Zugriff auf ein Live-System mitmachen können. Wer eigene laufende Tests hat, bringt sie mit.

Nach dem Seminar

Sie behalten die Unterlagen, ein Hypothesen-Formular und eine Vorlage für ein Testprotokoll, in dem Frage, Erwartung, Laufzeit und Ergebnis stehen. Diese drei Blätter ersetzen später jede Diskussion über Bauchgefühl.

Zwei Wochen nach dem Seminar bekommen Sie eine kurze Nachfassung: Formulieren Sie einen Test, den Sie ohnehin vorhatten, als Hypothese und schicken Sie uns die Fassung. Wir geben Rückmeldung, bevor Sie Traffic ausgeben.

Für Teams gibt es das Seminar als Inhouse-Veranstaltung mit den eigenen Fragestellungen aus dem Shop. Der Ablauf bleibt gleich, die Beispiele kommen von Ihnen.

Programm: 2 Tage

Tag 1 – Grundlagen A/B-Testing

• Was ein A/B-Test leistet
• Wann Testen sinnvoll ist
• Von der Beobachtung zur Hypothese
• Eine Variable pro Test
• Stichprobe und Laufzeit
• Fehlerquellen vermeiden

Tag 2 – Durchführung

• Signifikanz verstehen
• Ergebnisse richtig lesen
• Testen als Gewohnheit
• Lernen aus Verlierern

Beide Tage laufen von 09:00 bis 16:15 Uhr mit Pausen am Vormittag, über Mittag und am Nachmittag. Zwischen den Blöcken liegen kurze Selbsttests, mit denen Sie Ihren Stand prüfen, bevor Sie weitergehen.

Jeder Tag hat drei Teile: eine Einführung in das jeweilige Muster, eine Übung an Ihrem eigenen Fall und eine Auswertung im Plenum. Am Ende des ersten Tages formulieren Sie eine Hypothese, die Sie bis zum zweiten Tag prüfen.

Zum Seminar gehört ein Self-Learning Track. Er enthält die Muster aus beiden Tagen als kurze Lerneinheiten mit Beispielen und je einem Selbsttest. Sie können ihn vor dem Termin durchgehen, um Begriffe zu klären, oder danach, um zu wiederholen, was im Gespräch saß und was nicht.

Unser Ansatz

Wir arbeiten an Ihren Fragen, nicht an einer Sammlung von Best Practices. Zu Beginn jeder Übung legen Sie fest, welche Beobachtung Sie stört und was Sie daraus ableiten wollen; am Ende steht ein Test, den Sie verantworten können.

Die Übungen sind kurz und wiederholen sich in Variationen. Das ist Absicht: Eine Hypothese formuliert man nicht durch Zuhören, sondern durch wiederholtes Schärfen an echten Fällen.

Gearbeitet wird zu zweit, in kleinen Gruppen und im Plenum, mit wechselnden Partnern. Jeder Teilnehmende bekommt Rückmeldung zu seiner Fragestellung, nicht nur zu seinem Testaufbau. Teilnehmerzahl und Partnerniveau sind bewusst begrenzt: bei 16 Personen ist keine anonyme Vorlesung möglich.