Testy A/B

Testy A/B

Metoda polegająca na porównaniu dwóch wersji materiału (np. strony WWW, mailingu, nagłówka) celem wybrania tej wersji, która lepiej realizuje cele (generuje ruch, skutkuje sprzedażą etc.).

Dobór grupy

Użytkowników dzieli się na 2 równe grupy, którym przedstawia się wersję bazową tzw. kontrolną oraz nową wersję tzw. wariację.

Obszary zastosowania

• Strony WWW (nagłówki, grafiki, buttony, kroki procesu etc.)
• Mailing (tytuł, grafika, hasło, button, kolorystyka etc.)
• Model biznesowy (ceny - promocje, targety, value proposition etc.)
• Komunikacja (teksty w Social Media, grafiki, #tagi, układ, etc.)
• Formularze (układ pól, tytuły pól, liczba i typ pól)

Obszary zastosowania

• Długość
• Wielkość
• Kolor
• Typografia
• Układ
• Styl designu

Twarde dane

vs

Założenia

To użytkownicy decydują, który materiał jest lepszy.

Wybierają zwycięzcę.

Dlaczego warto

• praktyczna weryfikacja realnych potrzeb użytkowników
• poprawa UX materiałów
• dopasowanie architektury informacji
  i layoutu do potrzeb użytkowników
• zwiększenie skuteczności prowadzonych działań w Internecie
• oszczędność pracy (testujesz przed implementacją)

Narzędzia

• Optimizely.com
• Google Website Optimizer / Google Analytics
• VWO.com
• A/Bingo
• Vanity.labnotes.org
• Unbounce.com
• SiteSpect.com
• Webtrends.com
• Adobe Test & Target

Case study

37Signals: “30-Day Free Trial on All Accounts” vs “Start a Highrise Account.” 30%+ rejestracji

Twitter Call to Action: “You should follow me on Twitter here” vs “I’m on Twitter.” 173%+ followersów

Grafika vs zdjęcie ludzi 200%+ akcja

Czerwony vs zielony 34%+ akcja

Rady

• Zawsze dziel użytkowników na 2 grupy i testuj 2 wersje w jednym czasie. Testuj równolegle. Nie 1 po 2.
• Nie wyciągaj wniosków zbyt szybko. Grupa testowa powinna stanowić odpowiedni procent całej grupy.
• Testuj na nowych użytkownikach. Wyklucz z testów dotychczasowych userów.
• Opieraj swoje decyzje na wynikach testów. Nie rezygnuj z nich tylko dlatego, że np. wyglądają gorzej.
• Zdefiniuj wcześniej czas trwania testów (w czasie lub liczbie testerów).
• Pokazuj tym samym użytkownikom zawsze tą samą wersję (na podstawie cookies i sesji).
• Jeśli testowane elementy pojawiają się w różnych miejscach strony
  np. button. Wszędzie powinien być taki sam. Nie dokonuj zmian tylko
  w wybranych miejscach. Użytkownik się pogubi.
• Rób jak najwięcej A/B testów. To, że coś zadziałało u kogoś innego, nie znaczy, że zadziała u Ciebie.

Dziękujemy :)

Beata Mosór-Szyszka

Magdalena Marzec

Michał Paulo

Piotr Rokita

Sebastian Wlaźlak