Delt URL-testing

Testing av delte URL-er er en eksperimentell metode der hver variant befinner seg på sin egen distinkte URL, og besøkende blir omdirigert til en av dem tilfeldig. Det skiller seg fra standard A/B-testing, der varianter gjengis på samme adresse ved å endre siden etter at den lastes inn, eller ved å vise forskjellig markup fra serveren. Testing av delte URL-er er det passende valget når varianter er for forskjellige til å kunne produseres ved modifikasjon på klientsiden: en fullstendig gjenoppbygd landingsside, en annen betalingsflyt, en ny mal som kjører på en separat infrastruktur, eller en side bygget av et annet team på en annen stabel.

Hovedfordelen er frihet. Fordi varianten er en ekte side i stedet for et sett med DOM-manipulasjoner brukt på en eksisterende, er det ingen praktisk grense for hvor annerledes den kan være, og ingen risiko for at varianten bryter sammen når den underliggende siden endres. Utviklingsteam kan bygge utfordreren i sitt normale miljø, med sine vanlige verktøy og kvalitetssikring, i stedet for å uttrykke et redesign som et skript som omskriver originalen. For betydelige redesign er dette ofte den eneste gjennomførbare tilnærmingen.

Kostnadene er like reelle. Omdirigeringen legger til latens, vanligvis noen få hundre millisekunder, som brukes på én gruppe og ikke den andre, og introduserer derfor en systematisk forskjell som ikke er relatert til designet som testes. Tregere varianter konverterer dårligere, så omdirigeringsstraffen forvrider resultatene mot utfordreren. Omdirigeringer forårsaker også tap av besøkende under overgangen, noe som er en vanlig kilde til uoverensstemmelse i utvalgsforholdet. Analysekonfigurasjonen er mer kompleks, fordi økter nå spenner over to URL-er, og henvisningsinformasjon kan gå tapt. Søkemotorer må forhindres i å indeksere varianten, noe som krever kanoniske tagger som peker til originalen.

Nøye implementering reduserer det meste av dette. Omdirigeringer på serversiden er raskere og mer pålitelige enn omdirigeringer på klientsiden. Forhåndslasting eller forhåndstilkobling til variantdomenet reduserer den opplevde forsinkelsen. Konsekvent bucketing, slik at en tilbakevendende besøkende alltid lander på samme variant, forhindrer den svært inkonsistente opplevelsen av å se forskjellige versjoner på tvers av økter. Å kjøre en A/A-delt URL-test før det virkelige eksperimentet, der begge URL-ene serverer identiske sider, avslører hvor mye av den målte forskjellen som er omdirigeringsartefakt snarere enn designeffekt, og dette tallet bør være kjent før konklusjoner trekkes.

Testing av delte URL-er er også den naturlige mekanismen for testing på tvers av teknologigrenser. Når en organisasjon migrerer en del av nettstedet sitt til en ny plattform, vil det å kjøre de gamle og nye versjonene som delte URL-er gjøre det mulig å måle forretningsmessige konsekvenser av migreringen før full binding, i stedet for å oppdage dem etterpå. Det samme gjelder testing av en ny handelsplattform, en ombygd bookingmotor eller et omplattformet innholdssystem, der alternativet er en hard overgang uten måling i det hele tatt.

Søkemotorhåndtering krever bevisst konfigurasjon, og å gjøre feil kan vare lenger enn eksperimentet. Variant-URL-en bør ha en kanonisk tagg som peker til originalen, slik at rangeringssignaler konsolideres på én adresse, og omdirigeringen bør være midlertidig snarere enn en permanent omdirigering, siden en permanent statuskode instruerer søkemotorer til å erstatte originalen i indeksen sin. Å ekskludere variant-URL-er fra nettstedskartet og overvåke deres utseende i søkeresultatene er fornuftige forholdsregler på større nettsteder. Etter at testen er avsluttet, bør den tapende varianten fjernes eller omdirigeres i stedet for å være tilgjengelig, fordi forlatte test-URL-er akkumuleres over år, blir indeksert, tiltrekker seg lenker og til slutt dukker opp i søkeresultatene som dupliserte versjoner av sider som virksomheten siden har endret flere ganger.

I oppdrag der en ny designløsning er på bordet, er det denne metoden som gjør et subjektivt argument om det nye designet til et spørsmål som kan besvares. produktdesign laget kan bygge utfordreren ordentlig, og en CRO-tjeneste Teamet kan måle det mot den etablerte operatøren under reell trafikk, med omdirigeringsstraffen kvantifisert og tatt hensyn til. Spesielt for beslutninger om replattforming er dette forskjellen mellom en migrering begrunnet av en forretningsplan og en begrunnet av håp, og det er en standard del av hvordan større enterprise programmer reduserer risikoen for endringer som ellers ville vært irreversible.