A/B tesztelj profin! (képzés)

Értsd meg az A/B tesztelés mögött húzódó tudományos és üzleti alapelveket -- és érj el valódi, hosszú távú és kiemelkedő konverziónövekedést!

Avagy minden, amit az A/B tesztelésről tudnod kell - egy 2.5 órás képzésben.

Az online szakma 90%-a hibás A/B teszteket futtat...

Az elmúlt pár években nagyon sokszor fordult elő velem, hogy egy-egy komolyabb data science projekt kezdetekor az ügyfél büszkén újságolta, hogy amúgy ő szokott A/B tesztelni is és méghozzá elég szép eredményekkel.

Aztán amikor közösen leültünk megnézni ezeket a teszteket, majdnem kivétel nélkül mindig kiderült, hogy valamilyen hiba csúszott a számításba. Az ígéretes konverziójavulások csak egy hibásan összeállított vagy kiértékelt teszt eredményei voltak. A látszólagos 40%-os növekedés a valóságban 0% volt (vagy rosszabb esetben 20%-os csökkenés).

Ahogy írtam: az online szakma 90%-a hibás teszteket futtat.


Az A/B tesztelj profin! képzést azért hoztam létre, hogy Te lehess a kivétel. Hogy megtanulhasd azokat az alapelveket, amik mentén Te már szakmailag korrekt, profi és valós eredményeket hozó A/B teszteket tudsz majd készíteni!

Data Science + A/B tesztelés

Ahhoz, hogy szakszerűen A/B tesztelj, nem kell data scientist-nek lenned.

Arra viszont mindenképpen szükséged lesz, hogy egy bizonyos szinten megértsd a téma (adat)tudományos hátterét is. 


Nem kell megijedni, nem bonyolult dolgokról van szó!

Három főbb területet kell átlátni:

  • 1

    Az üzleti logikát és alkalmazhatóságot -- hogyan tud a tesztelés számodra (és a céged számára) valódi értéket (pl. többlet bevételt) teremteni

  • 2
    A matematikai alapelveket -- hogyan tudod elkerülni a klasszikus statisztikai hibákat (pl. túl korán leállított teszt)
  • 3
    A kutatási keretrendszert -- hogyan tudod az ötletszerű tesztelgetés helyett fókuszáltan, priorizáltan mindig a legfontosabb (és legígéretesebb) dolgokat tesztelni

Ha ez megvan, akkor már csak néhány best practice-t kell mellé tenni, illetve odafigyelni a tipikus buktatókra (kb. 6-7 típushibáról beszélünk)...


És már készen is állsz egy tökéletesen kivitelezett A/B tesztre!

Tanulj meg profin A/B tesztelni!

Tomi Mester - author of data36.com

Helló, Mester Tomi vagyok, 7+ éve adatos szakember. Több száz A/B tesztet láttam, menedzseltem és/vagy készítettem saját kézzel. Emellett volt szerencsém az iparág legfontosabb nemzetközi konferenciáira eljutni és a legjobb szakemberektől tanulni.

Az elmúlt években ellestem (és gyakorlatban továbbfejlesztettem) a legjobb módszertanokat, élőben láttam az összes tipikus hibát és a legfontosabb best practice-eket is.


Erre a többéves tapasztalatra alapozva összeállítottam egy olyan tudásanyagot és keretrendszert, amit elsajátítva tényleg akárki profin tud A/B tesztelni.


Ezt pedig most szeretném megosztani veled is.

Ebben a 2.5 órás előadásban megmutatok mindent, amit az A/B tesztelésről tudnod kell.

Mikor?

2019. október 30. (szerda)

14:00-16:30

Hol?

Budapest belvárosa

(további részletek a jelentkezőknek...)

Max létszám

20 résztvevő

Tematika.

Az alapok, a módszertan, az összes buktató, trükk és best practice: felfedve

Az A/B tesztelj profin! képzés egy 2.5 órás előadás.


Szándékosan tömörre és lényegretörőre terveztem. Azt akartam, hogy minden benne legyen, ami kell és semmi, ami nem.


Emellett arra is figyeltem, hogy az anyag önmagában is megállja a helyét. Tehát elég ezt az egy előadást meghallgatnod (és persze megértened) és mindent tudni fogsz, ami ahhoz kell, hogy szakszerűen tudj A/B tesztelni.


Íme a tematika:

Az előadás első fele (elméleti háttér ~60 perc):

  • 1

    Miért van szükség az A/B tesztelésre egyáltalán?

  • 2
    Mi az az A/B tesztelés? Mire való és mire nem? (A "kutató" mindset vs. a "konverzió-hajhász" mindset.)
  • 3
    Miért és mikor kell A/B tesztelni? Mikor felesleges? És mikor tilos?
  • 4
    A tudomány (avagy a matek) az A/B tesztelés mögött. (Ezt tudnod kell, hogy ne kövess el banális hibákat.)

Az előadás második fele (egy profin kivitelezett A/B teszt lépésről lépésre ~70 perc):

  • 5

    1. lépés. Előkészítés. Ez a lépés fontosabb, mint hinnéd. Gyakorlatilag a teszted eredménye ~80%-ban itt dől el.

  • 6
    2. lépés. Implementálás. Egy tipikus A/B tesztelő eszköz bemutatása. Továbbá az "egyszerre-egy-dolgot-tesztelj" mítoszról és további hibákról.
  • 7
    3. lépés. Futtatás. Mennyi ideig fusson a teszt? Mekkora minta kell? És az ezekhez kapcsolódó klasszikus hibák.
  • 8
    4. lépés: Értékelés. Hogyan ne csapd be magad? És mit csinálj, ha rosszabb lett az új verzió?
  • 9
    További A/B teszt buktatók, típushibák, stb. amikre figyelni kell.
  • 10
    Zárás: összefoglalás és a helyes A/B teszt mindset. (+kérdés-válasz rész)
ab-teszt-kepzes-1

Szakmailag korrekt és tudományosan alátámasztott válaszokat kapsz a leggyakoribb kérdésekre

Az elmúlt években rengeteg kérdést kaptam a témával kapcsolatban. Ezeket mind-mind megfogom válaszolni. Csak néhány fontosabb a teljesség igénye nélkül:

  • "Mennyi ideig futtassak egy tesztet?"
  • "Mekkora látogatószám (mekkora minta) után mondhatom valósnak az eredményemet?"
  • "Mi a megfelelő szignifikancia? (És mi az egyáltalán?)"
  • "Mit érdemes tesztelni? Szöveget? Színt? Gombot? Képet? Egész landing oldalt?"
  • "Melyik ötletemet teszteljem először? Hogyan priorizáljak?"
  • "Mit csináljak, ha egy teszt nem úgy teljesít, mint vártam?"
  • "Mi alapján értékeljek? Összbevétel vagy konverziós arány? A-termék vagy B-termék eladása alapján? Mikrokonverzió vagy makrokonverzió alapján? Milyen kulcsmérőszám(ok)ra figyeljek oda?"
  • "A/B teszteljek vagy A/B/C/D/... teszteljek?
  • "Használjak-e multivariáns tesztet?
  • "Külön szedjem a desktop és mobil felhasználókat?
  • "Mi(k) a legjobb A/B tesztelő szoftver(ek)?"
  • "Mit csináljak, ha a cégemben/csapatomban nincs elég kapacitás A/B tesztelésre? (Pl. ha csak én foglalkozom vele?)"
  • "Mit csináljak, ha túl kicsit a forgalom a weblapomon (és hónapokig kéne várni a teszteredményre)?"
  • És sok, sok más kérdés...
ab tesztelés képzés

Még azt is megmutatom, hogy ennek a képzésnek a nevét hogyan A/B teszteltem ki ;-)

Ez a képzés valódi tapasztalaton alapul: valós online üzletek valós példáin keresztül tanulhatsz.

Az elmúlt 6 évben több, mint 500 résztvevőnek tartottam data science képzéseket. Két dolog számomra kulcsfontosságú: (1) a gyakorlatiasság és (2) az egyszerűség.


Kifejezetten figyelek arra, hogy a bonyolultabb koncepciókat is úgy magyarázzam el, hogy azok mindenki számára érthetőek és kézzelfoghatóak legyenel.


Ezen a képzésen sok-sok valós esettanulmányt fogsz látni. A legtöbb alapelvet olyan példákon keresztül fogom bemutatni, amit a saját vagy ismerőseim, kollégáim munkáiból hozok.

Kinek ajánlom ezt a képzést?

Egy valamiről szeretnélek biztosítani. Ez nem egy "inspiráló" marketinges kamu-tréning. Itt az alkalmazhatóságra és a realitásra fogunk fókuszálni.


Ezért ezt az előadást olyan embereknek ajánlom, akik az A/B tesztelésben nem egy divatos marketingeszközt látnak és nem azt várják, hogy majd egy nap alatt megduplázzák a konverziójukat. (Bárki, aki ezt ígéri, hazudik.)


Olyan szakembereknek ajánlom ezt az anyagot, akik meg akarják érteni a tudományt és a stratégiát az A/B tesztelés mögött. Olyanoknak, akik látják, hogy ez egy kutatási módszer - és készek lépésről lépésre, következetesen és módszeresen javítani az eredményeiket az igazi hosszú távú siker érdekében.


De azért mondok "célközönséget" is! :-)

Az A/B tesztelj profin! képzés nekik szól:

  • digitális marketing szakembereknek (SEM, SEO, PPC, Social, tartalommarketing, etc.)
  • UX szakembereknek
  • online üzletekkel foglalkozó szakembereknek (megvalósítóknak és csapatvezetőknek egyaránt)
  • adatelemzőknek, akik hasonló projekteken terveznek dolgozni a közeljövőben
  • mindenkinek, aki úgy érzi, hogy érinti a téma és invesztálna a karrierjébe 2 órát

Eddig több, mint 500 ember vett részt a data science képzéseimen -- olyan cégektől mint...

audi logo sql workshop
butlers logo sql workshop
iprospect logo sql workshop
lego logo sql workshop
t mobile logo sql workshop
heineken logo sql workshop
telenor logo sql workshop

és még sokan mások...

"Nagyon az alapokról lesz szó vagy gyakorlott marketingeseknek is érdekes?"

A fenti kérdést az egyik résztvevő tette fel mielőtt regisztrált.

Azt gondolom ez sokak fejében felmerült, úgyhogy bemásolom ide a beszélgetés megfelelő részletét:

Szia Tomi, gyors kérdés:
Nagyon az alapokról lesz szó vagy gyakorlott marketingeseknek is érdekes (nem magamra gondolok)...

Hello! Jó kérdés -- alapvetően teljesen a nulláról indulunk és oda jutunk el, hogy 100%-ra rendbe lesz téve az A/B tesztelés a fejekben. Szóval azt mondanám, hogy ha már pl. valaki aktívan A/B tesztel évek óta, jó eredménnyel, akkor felesleges eljönni. Aki most akar belevágni, vagy csinálja kb egy fél éve, de nem biztos, hogy jól, annak viszont érdemes.

A 2.5 órás előadás végére ide fogsz eljutni:

  • Megérted az A/B tesztelés elméleti és gyakorlati alapjait. Tudni fogod, hogy mikor van és mikor nincs rá szükséged.
  • Látni fogod, hogy mire kell odafigyelni és nem fogod elkövetni azokat a hibákat, amit sokan mások igen.
  • Képes leszel szakmailag helyesen megépíteni, lefuttatni és kiértékelni a saját tesztjeidet.
  • Megérted, hogy az A/B tesztelés hogyan tudja támogatni az üzletmentedet, hogyan tud neked ténylegesen magasabb konverziót és több bevételt hozni.
  • Nem hoznak többé zavarba az olyan kérdések, minthogy "meddig fusson a teszt" vagy "hány látogató kell". Érteni fogod a statisztikia szignifikancia fogalmát (és fontosságát.)
  • És persze tudni fogod, hogy miért fontos, hogy a tesztelés ne csak önmagában pörögjön, hanem egy nagyobb kutatási keretrendszer része legyen.
ab tesztelés képzés

Az előadó

Mester Tomi vagyok. Már több mint 7 éve adatelemzőként és kutatóként dolgozom. A Prezinél kezdtem, majd az Adatlabor nevű projektem keretein belül konzultációkat és projektmunkákat csináltam sok-sok magyar webshopnak és startup-nak.


Később a svéd iZettle-nél is dolgoztam. Jelenleg az adatelemzés és az adatvezérelt módszerek és technológiák oktatásával foglalkozom a Data36 projekt keretein belül – elsősorban online, de Európa nagyobb városaiban is, mint pl. Berlin, Stockholm vagy Budapest.


Előadtam már a TEDxYouth-on, a barcelona-i E-commerce Summit-on, a svéd Analyticsdagarna-n és számos egyéb konferencián. Emellett O’Reilly author és több nemzetközi adatelemző blog vendégszerzője is vagyok.

Sajnos magyar nyelvű bemutatkozó videóm nincs, de itt van helyette a 2013-as TEDxYouth-os előadásom!

Regisztráció

Ezt a képzést magyar nyelven élőben nem tervezem tartani a jövőben. Viszont 2019. novembertől elérhető lesz az angol nyelvű online verziója. Több infó itt.

Gyakori kérdések

Az baj, ha csak keveset tudok a témáról?


Nem. Az alapoktól indulunk. Azért az célszerű, hogy ha az online marketing alapjaival tisztában vagy.


Kell hozni saját laptop-ot?


Nem, ez egy előadás, a te gépedre nem lesz szükség. Kivéve persze, ha azon akarsz jegyzetelni. :-)


Ez a dátum sajnos nem jó nekem. Lesz másik alkalom?


Valószínűleg nem. Terveim szerint ez az utolsó ismétlés ebből a képzésből. (Videókurzus elképzelhető, hogy lesz belőle.)

Kapok számlát?


Igen. A magyar törvények szerint minden résztvevő kap számlát. Ez automatikusan történik, a fizetési oldalon megadott infók alapján.


Tudok utalással/készpénzzel is fizetni?


Nem. Sajnos erre a képzésre csak bankkártyás vagy Paypal-os fizetéssel tudsz regisztrálni.


Én inkább egy belsős céges képzést szeretnék...


Ezt örömmel hallom! Kérlek, küldj egy e-mail-t a tomimester@data36.com-ra és egyeztetjük a részleteket!