Μετράμε την επιτυχία του CRO σε τρία επίπεδα και η κύρια μέτρηση μας είναι τα έσοδα ανά επισκέπτη — όχι το ποσοστό μετατροπής μεμονωμένα. Το ποσοστό μετατροπής μπορεί να αυξηθεί ενώ η μέση αξία παραγγελίας μειώνεται, αφήνοντας τα συνολικά έσοδα σταθερά. Το RPV καλύπτει αυτό το κενό. Σε επίπεδο δοκιμής, αναφέρουμε την αύξηση, τη στατιστική εμπιστοσύνη και τα πρόσθετα έσοδα. Κάθε δοκιμή εκτελείται για πλήρεις επιχειρηματικούς κύκλους, ώστε τα μοτίβα των εργάσιμων ημερών, των ημερών πληρωμής και των καμπανιών να μην παραμορφώνουν το αποτέλεσμα και ορίζουμε την ελάχιστη ανιχνεύσιμη επίδραση και το απαιτούμενο μέγεθος δείγματος πριν από τη δημοσίευση της δοκιμής — όχι αφού έχουμε δει τους αριθμούς. Σε επίπεδο προγράμματος, παρακολουθούμε την ταχύτητα των δοκιμών, το ποσοστό επιτυχίας, τη μέση αύξηση ανά νικητήρια δοκιμή και τα σωρευτικά ετήσια πρόσθετα έσοδα σε διάστημα 6-12 μηνών. Μια μεμονωμένη δοκιμή μπορεί να είναι τύχη. ένα έτος παραγωγής προγράμματος δεν μπορεί. Αυτός είναι επίσης ο αριθμός που απαντά στο μόνο ερώτημα που θέτει στην πραγματικότητα ένας CFO: τα ετήσια πρόσθετα έσοδα έναντι του κόστους του προγράμματος. Παράλληλα και με τα δύο, παρακολουθούμε μετρήσεις guardrail — μέση αξία παραγγελίας, ποσοστά επιστροφών και ακυρώσεων, όγκο αιτημάτων υποστήριξης και απόδοση σελίδων — έτσι ώστε μια νικητήρια δοκιμή να μην κερδίζει ποτέ μετατοπίζοντας ένα κόστος κάπου αλλού στην επιχείρηση. Υπολογίζουμε επίσης τις χαμένες δοκιμές ως αποτελέσματα. Μια παραλλαγή που υποαποδίδει είναι μια απόφαση κυκλοφορίας που δεν λάβατε εσείς και έσοδα που δεν χάσατε, τα οποία επικυρώθηκαν σε τρεις εβδομάδες αντί να ανακαλυφθούν σε ένα τρίμηνο. Κάθε δοκιμή αναφέρεται με την υπόθεσή της, τα δεδομένα της και την απόφαση που πληροφορεί, είτε κέρδισε είτε όχι. Τίποτα από αυτά δεν λειτουργεί χωρίς μια κλειδωμένη γραμμή βάσης. Πριν από την εκτέλεση οποιασδήποτε δοκιμής, επικυρώνουμε τη ρύθμιση αναλυτικών στοιχείων και καθορίζουμε το σημείο αναφοράς πριν από το πρόγραμμα — δεν ισχυριζόμαστε βελτίωση σε αριθμούς που δεν μπορούσαμε να μετρήσουμε εξαρχής.