Kreativ testning er den systematiske sammenligning af reklameeksekveringer for at bestemme, hvilken der klarer sig bedst i forhold til et defineret mål. Den anvender eksperimentelle metoder på den del af reklamen, der normalt afgøres af meninger, og i et miljø, hvor målretning og budgivning i stigende grad automatiseres, er det kreative en af de få tilbageværende variabler, som en annoncør reelt kontrollerer.
Dens betydning er vokset netop på grund af denne automatisering. Da bud blev sat manuelt, og målgrupper blev defineret manuelt, gav færdigheder inden for disse områder en betydelig fordel. Med maskinlæringsbudgivning og brede målgruppesignaler finder platforme i stigende grad selv de rigtige personer, og det differentierende input bliver det, disse personer vises. Analyser på tværs af store annoncedatasæt viser konsekvent, at kreativitet er blandt de største drivkræfter for variation i kampagnepræstation.
Effektiv testning skelner mellem budskab og udførelse. Testning af to overskrifter, der udtrykker den samme påstand, måler ordlyden; testning af to forskellige påstande måler, hvilket argument der overbeviser, og det andet spørgsmål er langt mere værd. Programmer, der uendeligt gentager farve, billedsprog og formuleringer, uden at sætte spørgsmålstegn ved den underliggende påstand, har en tendens til hurtigt at stagnere, hvorimod dem, der tester virkelig forskellige vinkler, såsom pris versus bekvemmelighed versus risikoreduktion, finder effekter, der er store nok til at have betydning.
Testdesign skal forholde sig til, hvordan platforme leverer. Automatiserede leveringssystemer optimerer i forhold til det aktiv, der præsterer bedst tidligt, hvilket betyder, at en ukontrolleret sammenligning bliver selvopfyldende: Platformen tildeler visninger til den tidlige leder, og de andre aktiver akkumulerer aldrig nok levering til at blive vurderet. Brug af passende eksperimentværktøjer, hvor platforme tilbyder dem, eller opdeling af aktiver i separate kampagner med lige store budgetter er nødvendigt for en retfærdig sammenligning.
Volumenkravene er højere, end de fleste annoncører antager, af de samme statistiske årsager, der gælder for ethvert eksperiment. Forskelle i klikrater kan vurderes relativt hurtigt, fordi visninger akkumuleres hurtigt, men konverteringsforskelle kræver tilstrækkeligt med konverteringer pr. variant til at skelne signal fra støj, og kampagner med beskeden konverteringsvolumen kan ofte slet ikke løse kreative forskelle inden for en rimelig periode. At anerkende denne begrænsning forhindrer et testprogram, der matematisk ikke kan konkludere.
Kreativ træthed betyder, at resultater har en holdbarhed, hvilket adskiller dette fra de fleste andre tests. Et aktiv, der vinder i dag, vil falde, når publikum ser det gentagne gange, så kreativ testning er et kontinuerligt produktionskrav snarere end en engangsoptimering. Programmer, der identificerer en vinder og kører den på ubestemt tid, ser præstationen erodere og tilskriver ofte fejlagtigt faldet til publikumsmætning eller platformændringer snarere end til slid.
Platform-native formater klarer sig generelt bedre end genbrugte aktiver, og dette er et af de mere pålidelige fund inden for disciplinen. Materiale produceret til én kanal og beskåret til en anden læses som lånt, mens kreative elementer, der er bygget til, hvordan en specifik placering faktisk forbruges, inklusive billedformat, lydforventninger og kravet om første sekund på formater, der kan springes over, klarer sig væsentligt bedre. Produktionsprocesser, der behandler kanaltilpasning som et størrelsesændringstrin snarere end et kreativt, klarer sig systematisk dårligere.
Dokumentation af det lærte er vigtigere her end de individuelle resultater, fordi kreative indsigter overføres på tværs af kampagner og kanaler på en måde, som budindstillinger ikke gør. En registrering af, hvilke forslag, formater og framings der har fungeret med hvilke målgrupper, bliver et akkumulerende aktiv, og uden den tester organisationer de samme ideer igen, hver gang teamet ændrer sig.
Fordi de stærkeste kreative fund normalt vedrører forslaget snarere end udførelsen, er de direkte forbundet med arbejde, der foregår andre steder. I praksis er kreativ testning inden for marketing tjenester trækker sine hypoteser ud fra den samme kundeevidens, der informerer brugerundersøgelser, og de vindende budskaber er normalt værd at videregive til landingssider og indhold på webstedet via en CRO-tjeneste program, således at det argument, der fik klikket, er det, der møder den besøgende.