Classez vos tâches CRO en attente lorsque ICE, PIE, PXL et RICE divergent.

Classez vos tâches CRO en attente lorsque ICE, PIE, PXL et RICE divergent.

Seul un tiers environ des idées testées sur la plateforme d'expérimentation de Microsoft ont amélioré l'indicateur qu'elles étaient censées améliorer, et Netflix a ramené son propre taux de réussite à près d'un sur dix (Kohavi et Longbotham, 2015Si la plupart de vos idées de tests en attente sont erronées, l'ordre dans lequel vous les testez déterminera en grande partie votre retour sur investissement. Ce guide s'adresse aux responsables CRO et aux chefs de produit qui ont déjà plus d'idées de tests que de trafic. Nous évaluons trois idées de tests identiques à l'aide des méthodes ICE, PIE, PXL et RICE, expliquons les divergences entre les quatre classements, proposons une règle pour les départager et ajoutons le critère essentiel qui leur fait défaut : la possibilité d'atteindre un niveau de signification statistique avant la fin du trimestre.

Sur quoi chaque cadre mise réellement

Tous quatre produisent un résultat numérique, mais aucun ne mesure la même chose. Chacun relève moins d'un système de notation que d'une opinion condensée sur ce qui justifie la réalisation d'un test.

FrameworkTAContributionsLaits en poudreOrigineLe pari qu'il encode
VÉLOImpact, confiance, facilité, chacun de 1 à 10Je × C × ESean Ellis, cabinet de conseil en croissanceLe jugement éclairé par l'expérience est le signal le moins coûteux
TARTEPotentiel, importance, facilité, chaque critère étant noté de 1 à 10.Moyenne des troisChris Goward, WiderFunnel (maintenant Conversion)L'endroit où vous effectuez vos tests est plus important que ce que vous changez.
PXLEnviron 9 questions, principalement binaires, certaines pondérées à 0 ou 2.Somme, sur un maximum fixePeep Laja, CXL, 27 sept. 2016Les preuves qui étayent une idée sont plus importantes que la simple confiance en celle-ci.
RIZPortée (personnes par période), Impact (0.25 à 3), Confiance (50/80/100 %), Effort (personnes-mois)(R × I × C) / ESean McBride, Intercom, 5 janvier 2018Score impact par unité de travail

Deux corrections avant d'en adopter une. PXL a été conçu pour contrer les autres frameworks d'optimisation du taux de conversion (CRO) : selon Laja, si l'on pouvait estimer avec précision le potentiel ou la confiance à l'avance, un test serait superflu. Quant à PIE, sa page de référence définit les critères, mais ne propose ni échelle ni formule, laissant chaque équipe libre d'inventer la sienne. Le domaine widerefunnel.com redirige désormais vers conversion.com, si bien que le framework cité dans la plupart des présentations CRO ne dispose plus de spécification principale maintenue.

Le même arriéré, noté de quatre manières

Trois tests de candidats chez un détaillant de taille moyenne. Les chiffres sont donnés à titre indicatif et ne représentent pas des données client.

  • A. Détail des mensualités (taksit) intégré au bloc prix de la page produit. 180 000 visites mensuelles sur la page produit, avec un suivi analytique et un système de tickets clients.
  • B. Suppression de la création obligatoire d'un compte lors du paiement. 12 000 processus de paiement sont en cours chaque mois, avec un suivi assuré par des tests d'utilisabilité, des enregistrements, des analyses et un réseau de contacts d'assistance.
  • C. Réécrire le titre principal de la page d'accueil. 220 000 visites par mois sur la page d'accueil, aucune étude à l'appui, proposition faite lors d'un atelier.
TestRIZVÉLOTARTEPXL (sur 12)
A : Détail des versements144,000 (1st)294 (2e)7.0 (2e)10 (1st)
B : aucun compte forcé18,000 (3e)405 (1st)6.3 (3e)9 (2e)
C : titre principal55,000 (2e)144 (3e)7.3 (1st)6 (3e)

Chaque test réussit dans au moins un cadre de référence. Le désaccord porte sur le fonctionnement même de ces cadres :

  • RICE place A en premier Car Reach correspond à un nombre brut de personnes. Cela masquera complètement les étapes de paiement et de création de compte dans tout tunnel de conversion classique.
  • ICE privilégie B. Parce qu'un expert senior attribue les notes « Impact 9 », « Confiance 9 » et « ICE » à la création forcée de comptes, l'impact de ces notes se multiplie. Changer d'évaluateur, c'est changer de stratégie.
  • PIE place C en premier Parce que la page d'accueil génère le trafic le plus précieux et que le contenu est très facile à intégrer. PIE a été conçu pour choisir. pages; demandé de classer change, il récompense les modifications peu coûteuses apportées aux modèles importants.
  • PXL place C en dernier Parce que C obtient zéro aux quatre questions sur les preuves. C'est le seul cadre qui pénalise fondamentalement une intuition au lieu de se fier à l'honnêteté de l'évaluateur quant à son niveau de confiance.

Lequel utiliser : choisissez en fonction de votre contrainte de liaison.

contrainte de liaisonUtilisez le Parce que
Aucune donnée de recherche pour l'instant, dix premiers testsICE, avec des ancres écritesFonctionne uniquement sur la base du jugement. Traiter le résultat comme une file d'attente, et non comme un classement.
L'équipe continue de tester des opinions et de perdre.PXLLes questions binaires sont difficiles à gonfler artificiellement.
Capacité d'ingénierie, pas traficRIZLa seule avec un dénominateur, donc la seule qui optimise le débit.
Choisir la page ou le modèle sur lequel travaillerTARTEConçu pour répondre à cette question.
TrafficPersonne seulLes quatre ignorent si un test peut se terminer. Ajoutez la porte ci-dessous.

La porte est manquante pour les quatre : ce test peut-il se terminer ?

La portée ne garantit pas la détectabilité. Vérifiez la faisabilité avant l'évaluation, en utilisant l'approximation normale pour un test bilatéral avec un seuil de signification de 95 % et une puissance de 80 %.

n per variant ≈ 15.7 × p × (1 - p) / d²

où p est le taux de base de la métrique que vous déplacez et d Il s'agit de la hausse absolue que vous souhaitez détecter. Appliquée à la liste de tâches ci-dessus :

TestMétrique et référenceMDEPar varianteSemaines
AVisionneuse PDP à acheter, 2.0%5 % relatif (0.1 pp)~ 307,700~ 14
AVisionneuse PDP à acheter, 2.0%10 % relatif (0.2 pp)~ 76,900~4
BPassez à la caisse et achetez dès maintenant ! 55 %5 % relatif (2.75 pp)~ 5,140~4

Le test RICE classé premier ne peut être interprété avant un trimestre avec la sensibilité supposée par la plupart des équipes, tandis que le test RICE classé dernier est interprétable en un mois. Le test A repose sur un seuil de 2 % et le test B sur un seuil de 55 %, et la taille de l'échantillon est déterminée par p(1-p)/d²Ce n'est pas le nombre de personnes qui ont vu la page qui compte. Une approche plus globale devient également envisageable dès lors que l'on considère une augmentation minimale de 10 % comme le seuil critique, ce qui transforme l'effet minimal détectable en une décision de priorisation plutôt qu'en un simple détail statistique. Décidez-en lors de la même réunion que celle consacrée à la notation et choisissez un seul outil de calcul, car les différentes approximations de variance ne concordent pas toujours. Evan Miller et la Calculateur de test A/B Switas Les deux conviennent.

compartiments de faisabilité

  • Deux semaines ou moins. Vert. Marquez et courez.
  • Deux à quatre semaines. Amber. Exécutez-le seul, en couvrant au moins deux cycles hebdomadaires complets.
  • Quatre à huit semaines. Rouge pour un test A/B standard. Augmentez la MDE, passez à une métrique de base plus élevée ou utilisez un plan séquentiel avec une règle d'arrêt pré-enregistrée.
  • Plus de huit semaines. N’effectuez pas de test A/B. Lancez la version en vous basant sur votre jugement et des indicateurs de performance clés, ou menez une étude qualitative.

Cette porte d'entrée est plus importante ici que ne le suppose la littérature CRO en langue anglaise. Le volume du commerce électronique en Turquie a atteint 4.567 billions de lires pour environ 634 000 entreprises en 2025 (Ministère du Commerce, 12 mai 2026), soit en moyenne environ 7.2 millions de lires par entreprise et par an, et cette répartition est concentrée sur quelques plateformes seulement, si bien que le commerçant lambda se situe bien en dessous. Un site traitant quelques centaines de commandes par mois ne peut pas mener un test de paiement à une échelle significative. Pour ces sites, le résultat concret de la priorisation est une feuille de route pour la recherche et l'évaluation, et non une feuille de route pour les tests.

Donner du sens aux scores

  1. Rédigez les points d'ancrage avant la notation. L'impact 3 dans RICE doit avoir une signification dans votre devise, par exemple « augmente le taux de conversion des achats de plus de 5 % en valeur relative ». Sans points d'ancrage, les scores fluctuent au cours d'une même session.
  2. Limiter le niveau de confiance selon le niveau de preuve. Aucune limite n'est fixée à 50 % pour la recherche, 80 % pour l'analyse seule, et 100 % pour l'analyse, les méthodes qualitatives et un succès antérieur pertinent. Cela transpose la rigueur de PXL dans RICE.
  3. Évaluer à l'aveugle, réconcilier d'abord les écarts les plus importants. Trois personnes notant indépendamment, puis discutant uniquement des éléments qui diffèrent de trois points ou plus, prennent environ quarante minutes pour trente éléments.
  4. Comparaison du score prévu et du résultat réel. Après dix mesures, vérifiez si les scores d'impact sont corrélés aux effets observés. Dans le cas contraire, l'échelle est superflue et il convient de passer au PXL.
  5. Ne jamais comparer les scores entre différents référentiels. Un score RICE de 144 000 et un score PXL de 10 n'ont aucune relation.

Là où cela dysfonctionne

Ces cadres classent les idées, ils ne les améliorent pas. Une hypothèse faible, même avec un score de 11 sur 12 sur PXL, reste faible, et aucun modèle ne vous indiquera que le véritable problème se situe en amont de la page testée. Limites spécifiques :

  • L'effort est la donnée d'entrée la moins fiable et personne ne la réévalue. Le dénominateur de RICE est le nombre le plus susceptible d'être erroné d'un facteur deux, et cela modifie davantage le classement qu'un score d'impact erroné.
  • Aucune interaction entre les quatre modèles. Lancer trois tests simultanément sur un même entonnoir n'a rien donné en termes d'interférences.
  • Augmentez votre clientèle par mois pendant les périodes de vacances pour les entreprises saisonnières. Les secteurs du voyage et de l'éducation doivent évaluer la portée sur un cycle saisonnier complet, ou par rapport à la même période de l'année précédente.
  • Les dépendances sont invisibles. Un score partagé entre un backlog de tests et une feuille de route produit flatte également le côté qui a le plus de trafic.

[DONNÉES INTERNES NÉCESSAIRES : Taux de réussite de Switas par pilier au cours des 24 derniers mois, afin de remplacer les chiffres de taux de réussite de l’industrie par des chiffres de première main.]

[DONNÉES INTERNES NÉCESSAIRES : un backlog client anonymisé évalué selon deux cadres, pour remplacer l'exemple illustratif.]

Foire aux questions

La méthode RICE est-elle meilleure que la méthode ICE pour le travail avec les CRO ?

Pas intrinsèquement. RICE ajoute la portée et place l'effort au dénominateur, ce qui est utile lorsque la capacité de diffusion est le facteur limitant, mais favorise les pages à fort trafic. Utilisez RICE lorsque le temps de développement est limité, et ICE dans le cas contraire.

Quel score est suffisamment élevé pour pouvoir passer un test ?

Aucun des quatre ne possède de seuil absolu. Les scores sont ordinaux : ils indiquent la marche à suivre, et non la pertinence des actions entreprises. Le critère absolu est la faisabilité. Si un test ne permet pas d'atteindre un seuil de signification statistique en huit semaines, son score est sans importance.

Peut-on combiner deux cadres de travail ?

Combiner les résultats n'a aucun sens, car les échelles sont indépendantes. Combiner les données d'entrée, en revanche, est pertinent. L'utilisation conjointe des questions de preuve de PXL et du niveau de confiance de RICE constitue une solution hybride efficace, que nous utilisons le plus souvent.

PXL fonctionne-t-il pour les sites non liés au commerce électronique ?

Les questions relatives aux preuves sont applicables à tout produit. Les questions sur la mise en page supposent une page marketing et sont peu pertinentes pour les parcours utilisateurs connectés. Remplacez-les par des questions sur la fréquence d'interaction des utilisateurs avec cet élément dans leur parcours de travail.

Les sites à faible trafic devraient-ils même utiliser ces frameworks ?

Oui, pour le séquençage des tâches, mais cessez de qualifier le résultat de feuille de route des tests. Sur un site ne pouvant pas exécuter de tests, le même exercice ordonne les conclusions de l'audit UX, les questions de recherche et les tâches de développement.

Qui devrait participer à la séance de notation ?

Trois à cinq personnes ayant des points de vue différents : analyse, recherche ou assistance, et le responsable de la mise en œuvre. Une notation seule aboutit à des résultats absurdes et prétentieux ; une notation à dix personnes produit des moyennes qui ne permettent pas d’établir de classement.

Essayez ceci sur votre propre arriéré

Prenez les dix éléments en tête de votre liste de test, appliquez-leur la formule de faisabilité ci-dessus et comptez combien résistent à la sensibilité que vous avez supposée. Si plus de la moitié ne résistent pas, le classement n'a jamais été votre problème. CRO et équipe d'expérimentation Cette évaluation de la notation et de la faisabilité constitue la première étape d'un engagement.

Références


Inci Dindar
Écrit par

Inci Dindar

Forte d'une expérience en développement logiciel, elle a dirigé des équipes de conception, d'UX et de produit dans les secteurs de la fintech, des médias, du e-commerce et du voyage. Depuis trois ans, elle travaille à temps plein comme consultante en UX et design, notamment en tant que consultante UX externe pour un cabinet de conseil en management international, où elle accompagne des marques et des startups dans leurs audits, l'optimisation de leurs conversions et leurs processus de conception.


Articles Relatifs

Switas vu sur

Magnify : Développer le marketing d'influence avec Engin Yurtdakul

Découvrez notre étude de cas Microsoft Clarity

Nous avons mis en avant Microsoft Clarity comme un produit conçu pour répondre à des cas d'utilisation concrets, par des experts produits qui comprennent les défis rencontrés par des entreprises comme Switas. Des fonctionnalités telles que la détection des clics indésirables et le suivi des erreurs JavaScript se sont révélées précieuses pour identifier les frustrations des utilisateurs et les problèmes techniques, permettant ainsi des améliorations ciblées qui ont eu un impact direct sur l'expérience utilisateur et les taux de conversion.