WAS SOLLEN WIR TESTEN?

Marius Kremeyer Senior Account Executive D-A-CH

Optimizely

INHALTE

• Wie entstehen Testideen? • Hypothesen • Priorisieren

!

• Konkrete Beispiele

Wie entstehen Testideen?

WIE ENTSTEHEN TESTIDEEN?

• Analytics • Qualitative Studien • Direkter Kundenkontakt • Best Practices • Strategieberater*

WISSENSCHAFT

6 PRINZIPIEN (CIALDINI)

• Reziprozität/Gegenseitigkeit • Konsistenz und Verbindlichkeit • Social Proof • Sympathie • Autorität • Knappheit

Hypothesen

HYPOTHESEN

• Warum? • Wie sieht eine gute Hypothese aus?

ZIEL EINER HYPOTHESE

• Fokus auf die richtigen Ziele und KPIs • Fokus auf die richtigen Elemente • Daten führen zu klarer Entscheidung

!

Keine Hypothese —> Keine Learnings

WIE SIEHT EINE GUTE HYPOTHESE AUS?Wenn [gezielte Veränderung] dann [erwarteter Effekt; KPI] weil [tiefer liegendes Prinzip]. !

Wenn Empfehlungen von unten nach oben links verschoben werden dann steigen Pageviews pro Besuch weil sie mehr Aufmerksamkeit bekommen und Nutzer eher relevanten Content finden.

WIE SIEHT KEINE GUTE HYPOTHESE AUS?

Empfehlungen verschieben. !

Überschriften rot färben. !

Abo-Link auf Start- und Artikelseite vergrößern

WIE SIEHT EINE GUTE HYPOTHESE AUS?

Wenn [gezielte Veränderung] dann [erwarteter Effekt] weil [tiefer liegendes Prinzip]. !

!

—> Ursache und Wirkung verstehen

Priorisieren

PRIORISIEREN VON TESTIDEEN

• Warum? • Wie?

WARUM PRIORISIEREN?

• A/B Testing kostet Geld • Plattform • Personal

• Opportunitätskosten

WIE PRIORISIEREN?Er

war

tete

r Nut

zen

0

1

2

3

4

5

Kosten (Aufwand)0 1 2 3 4 5

5

4

321

WIE PRIORISIEREN?

WIE PRIORISIEREN?

INHALTE

• Wie entstehen Testideen? • Hypothesen • Priorisieren

STÄNDIGES TESTING

TESTIDEEN GENERIEREN

HYPOTHESEN ERSTELLEN

PRIORISIEREN

ERGEBNISSE ANALYSIEREN

EXPERIMENTE STARTEN

INHALTE

• Wie entstehen Testideen? • Hypothesen • Priorisieren

!

• Konkrete Beispiele

RECOMMENDATION ENGINE

HEADLINES TESTEN• Erster Schritt

-Einzelne Headlines testen -Allgemeine Prinzipien erproben:

• Kurz - lang • Moderat - Reißerisch • Mit Verben - Ohne Verben • Teaser-Bilder: Politiker vs. Thematik

• Zweiter Schritt -Integration ins Redaktionssystem/CMS integrieren

• Autor/Ressortleiter/Newsdesk gibt grundsätzlich mehrere Headlines • Automatisches Testing der Headlines

RESSORTS DARSTELLEN

NEWSLETTER-ANMELDUNG (MOBILE)

• Klassische Anmeldung (Eingabe per Emailadresse)

• One-Click-Anmeldung

STÄNDIGES TESTING

TESTIDEEN GENERIEREN

HYPOTHESEN ERSTELLEN

PRIORISIEREN

ERGEBNISSE ANALYSIEREN

EXPERIMENTE STARTEN

FRAGEN!

Wie entstehen Testideen? Hypothesen Priorisieren

!

Konkrete Beispiele

APPENDIX

WARUM OPTIMIEREN?

Steady Traffic with Conversion Rate Improvements

Steady Conversion Rate with Traffic Spike

Customers acquired per month

0

80

160

240

Jan. Feb. Mar. April May June July August

PRAXISBEISPIEL: BLEACHER REPORT

Peter Hastie, Frontend Entwickler

SOCIAL SHARING

Was ist die beste Funktionalität um Social Shares zu bekommen?

SOCIAL SHARING

Current VariationOriginal

+764%social media

followers

SOCIAL SHARES

Ständiges Testing eingeführt

*Peter Hastie, “Optimizely Developer Showcase,” OptiCon 2014.

WAS IST WIRKLICH DAS BESTE ZIEL?