Taux de réussite des tâches

Le taux de réussite des tâches correspond à la proportion de participants qui accomplissent correctement une tâche définie. Il s'agit de l'indicateur d'utilisabilité le plus fondamental, car il mesure si une interface répond effectivement aux besoins des utilisateurs. C'est le critère par rapport auquel tous les autres, tels que la satisfaction, la rapidité et les préférences esthétiques, sont secondaires. Un produit apprécié mais inutilisable n'est pas un produit réussi.

Mesurer la réussite exige de définir au préalable ce qui constitue un succès, et cette définition détermine la valeur de tout ce qui suit. Un système de notation binaire enregistre la réussite ou l'échec, ce qui convient aux tâches dont l'état final est clair, comme la finalisation d'un achat. Les niveaux de réussite permettent de prendre en compte les réussites partielles, en indiquant si la personne a terminé seule, avec difficulté, avec assistance, ou si elle a échoué. L'important est que le critère soit fixé avant les sessions, car décider a posteriori si un résultat est pris en compte risque d'entraîner précisément les biais d'interprétation que la mesure est censée éviter.

Cet indicateur est particulièrement convaincant auprès des parties prenantes car il est concret. Indiquer que quatre participants sur dix n'ont pas trouvé la politique de retour, ou que la moitié n'a pas pu finaliser son inscription sur son téléphone, est bien plus parlant qu'une description qualitative. De plus, il se prête facilement à une analyse commerciale, car un taux d'échec sur une tâche cruciale pour le chiffre d'affaires est directement lié aux pertes de transactions, et c'est généralement ce lien qui permet d'obtenir les ressources nécessaires pour y remédier.

L'interprétation des résultats exige une attention particulière à la taille de l'échantillon. Les études d'utilisabilité impliquent généralement cinq à douze participants, ce qui convient pour identifier les problèmes, mais produit des taux très imprécis : deux échecs sur huit peuvent correspondre à une large fourchette de valeurs réelles. Présenter un pourcentage issu d'un tel échantillon comme s'il s'agissait d'une estimation pour la population surestime la portée de l'étude ; une présentation honnête doit donc inclure les valeurs brutes, en plus des pourcentages. Lorsqu'un taux précis est essentiel, les tests non modérés à plus grande échelle ou l'analyse instrumentée du produit en production sont les outils appropriés.

La pertinence de cet indicateur dépend également de la qualité des tâches choisies. Les tâches qui reflètent les véritables intentions des utilisateurs, formulées dans leur propre vocabulaire et situées dans un contexte réaliste, produisent des résultats significatifs. Les tâches rédigées dans la terminologie propre à l'interface mesurent la correspondance lexicale. Les tâches artificiellement contraintes, ou qu'aucun utilisateur réel n'entreprendrait, produisent des chiffres d'apparence rigoureuse, mais dénués de sens. Le choix des tâches appropriées requiert généralement une connaissance préalable des objectifs réels des utilisateurs, issue de l'analyse de données, des données d'assistance ou d'études qualitatives antérieures.

Comparer les taux de réussite à une référence exige de bien comprendre ce que cette référence représente. Les chiffres publiés concernant le taux moyen d'achèvement des tâches dans différentes études proviennent de produits, de tâches et de populations de participants très différents, et comparer un taux spécifique à ces données s'avère peu pertinent. Les comparaisons internes sont plus utiles : la même tâche mesurée avant et après une modification, la même tâche mesurée sur différents segments ou appareils, ou encore la même tâche comparée à un produit concurrent testé dans des conditions identiques. Une comparaison avec un concurrent est particulièrement convaincante auprès des parties prenantes, car un écart tangible sur une tâche effectuée régulièrement par les clients est plus difficile à ignorer qu'un problème d'utilisabilité abstrait.

Le taux de réussite est particulièrement utile lorsqu'il est associé aux raisons des échecs, car il permet d'évaluer la gravité du problème tandis que l'analyse en révèle la cause. Cette association est une pratique courante au sein d'une [organisation/organisation]. recherche d'utilisateurs un programme, et la liste priorisée des tâches à haut risque d'échec qui en résulte constitue généralement l'élément le plus défendable d'un plan de remédiation élaboré par un Audit UX, car elle classe les problèmes en fonction de leur impact mesuré sur des objectifs réels plutôt que selon l'avis d'experts sur leur gravité.