A kísérletezési kultúra a megosztott normák, ösztönzők és döntéshozatali szokások összességét írja le, amelyek meghatározzák, hogy egy szervezet valóban felhasznál-e bizonyítékokat a termék- és marketingdöntések meghozatalához. Ez különbözik a kísérletezési képességtől, amely a tesztek futtatásához szükséges eszközök, forgalom és technikai készségek összessége. Sok szervezet megszerzi a képességet, de soha nem alakítja ki a kultúrát, ezért gyakran vásárolnak tesztelési platformokat, negyedévente lelkesen használják őket, majd csendben felhagynak velük.
Az egészséges kísérletező kultúra meghatározó jellemzője, hogy a tévedés normális és olcsó dolog. A nagy technológiai vállalatok publikált beszámolói szerint a kísérleteknek csak kisebb része hozza meg a szerzők által várt javulást, jelentős részük pedig ront a helyzeten. Ha egy sikertelen tesztet a tervezetet készítő személy kudarcaként kezelnek, az emberek abbahagyják a kockázatos javaslatok benyújtását, csak azokat a változtatásokat tesztelik, amelyekben biztosak, és megtalálják a módját a kétértelmű eredmények kedvező értelmezésének. A program ezután triviális, kiszámítható kimenetelű tesztekhez konvergál, amelyek nem generálnak tanulást és értéket.
A második jellemző, hogy a szenioritás nem írja felül a bizonyítékokat. Egy olyan kultúra, ahol egy teszteredményt egy vezetői preferencia megváltoztathat új bizonyítékok nélkül, mindenkinek azt tanítja, hogy a kísérletezés színház. Ez nem jelenti azt, hogy az adatoknak mechanikusan kellene minden döntést diktálniuk; a márka-, jogi, hozzáférhetőségi és hosszú távú stratégiai megfontolások jogosan felülírják a rövid távú konverziós eredményt. A lényeg az, hogy a felülbírálás kifejezett és indokolt, ne pedig csendes legyen, így a szervezet továbbra is közösen érti, hogy mit is mondtak valójában a bizonyítékok.
Harmadszor, a tanulást rögzítik és újra felhasználják. A múltbeli kísérletek – beleértve a hipotéziseket, terveket, eredményeket és értelmezéseket – kereshető adattára nélkül a szervezetek másfélévente újra tesztelik ugyanazokat az ötleteket, ahogy a személyzet lecserélődik. Egy jól karbantartott adattár az elszigetelt tesztek sorozatát egy felhalmozódó eszközzé alakítja: egy olyan tudásanyaggá, amely arról szól, hogy mire reagál ez a konkrét közönség, és amely sokkal értékesebb, mint bármely egyéni győzelem, és nem szerezhető meg iparági referenciaértékekből vagy versenytársak kutatásából.
A kultúraépítés általában átgondolt sorrendet igényel, nem pedig bejelentést. Kezdjünk kis számú, jól lebonyolított kísérlettel jelentős problémákon, hogy a korai eredmények hitelesek legyenek. Az eredményeket következetes formátumban tegyük közzé, amely egyenlő kiemeléssel tartalmazza a hibákat. Szerezz meg egy vezető támogatót, aki láthatóan megváltoztatja a döntést az eredmény alapján. Képezzük ki az érdekelt feleket a hatásméretek és intervallumok értelmezésére, hogy a megállapításokkal tudjanak foglalkozni, ahelyett, hogy ítéleteket kapnának. Előre határozzuk meg a döntési szabályokat, hogy a viták a tervezési időszakban, ne pedig a számok megérkezése után történjenek. Csak akkor bővítsük a hatókört, ha a gyakorlat megbízható.
Maga a program mérése ugyanolyan szigorúságot érdemel, mint amit a program máshol alkalmaz. A lefuttatott tesztek számlálása gyenge mutató, a győzelmek számlálása pedig rosszabb, mivel a biztonságos ötletek tesztelését jutalmazza. Hasznosabb mérőszámok közé tartozik a dokumentált tanulást eredményező kísérletek aránya az eredménytől függetlenül, az ütemterv azon részaránya, amely a bizonyítékok, és nem a vélemények alapján azonosított problémákat célozza meg, a kumulatív hatás mérése egy esetleges elutasítással szemben, valamint a bizonyítékok által megváltoztatott döntések száma. Ezek közül az utolsó a legközvetlenebb mutatója annak, hogy a kultúra egyáltalán létezik: egy olyan szervezetben, ahol egy év alatt egyetlen kísérleti eredmény sem változtatott meg jelentős döntést, nincs kísérleti kultúrája, bármit is sugalljon az eszközkészlete és a tesztmennyiség, és a megfelelő beavatkozás inkább a döntési jogok, mint a módszertan szintjén van.
A technikai munka általában a könnyebbik fele. A gyakorlatban egy növekedés menedzsment Az együttműködési szervezet erőfeszítéseinek jelentős részét az irányításra, a jelentéstételi formátumokra, a döntési jogokra és az érdekelt felek oktatására fordítja, ahelyett, hogy statisztikákra vagy eszközökre koncentrálna, mivel ezek azok a korlátok, amelyek meghatározzák, hogy az eredmények változtatnak-e bármit is. Ahol egy szervezet semmilyen kísérleti előzmény nélkül indul, ott egy strukturált stratégiai tervezés és tanácsadás A fázisra általában először is szükség van, hogy össze lehessen hangolni, mely döntéseket kívánja a vállalkozás valóban meghozni bizonyítékok alapján, és melyeket már eldöntöttek olyan okokból, amelyeket egyetlen kísérlet sem fog megváltoztatni.