Échelle d'utilisabilité du système (SUS)

L'échelle d'utilisabilité du système (SUSS) est un questionnaire en dix points qui attribue un score unique entre 0 et 100, représentant l'utilisabilité perçue. Créée par John Brooke en 1986, elle est devenue la mesure d'utilisabilité standardisée la plus utilisée, notamment grâce à sa concision, son indépendance vis-à-vis des technologies, sa gratuité et la comparabilité des résultats entre les produits et dans le temps.

Sa structure est délibérée. Les dix affirmations alternent formulations positives et négatives, ce qui incite les participants à ne pas choisir la même réponse à chaque question sans les lire. Chaque affirmation est évaluée sur une échelle d'accord à cinq points, et la procédure de notation convertit les réponses en un score de 0 à 100. Ce score n'est pas un pourcentage, contrairement à l'interprétation erronée la plus fréquente : un score de 68 ne signifie pas soixante-huit pour cent de quoi que ce soit. Il s'agit d'un point sur une échelle dont la signification provient d'une comparaison avec des valeurs de référence établies.

Ces critères de référence confèrent à l'instrument sa valeur pratique. Une étude portant sur un grand nombre d'études SUS a établi une moyenne d'environ 68, les scores supérieurs indiquant une convivialité perçue meilleure que la moyenne et les scores inférieurs, une convivialité moins bonne. Des travaux ultérieurs de Bangor, Kortum et Miller ont ajouté une échelle d'évaluation par adjectifs qui associe les plages de scores à des descriptions telles que « bon », « acceptable » et « médiocre », ce qui rend les résultats compréhensibles par les parties prenantes qui n'ont pas accès à la valeur numérique brute. Les classements en percentiles, calculés à partir des mêmes ensembles de données, permettent de situer un score par rapport à l'ensemble des systèmes testés.

Les points forts de cet outil sont sa fiabilité et sa comparabilité. Il offre des performances constantes, même avec de petits échantillons, et produit généralement des résultats exploitables avec une douzaine de répondants ou plus. Sa standardisation permet un suivi entre les différentes versions et une comparaison avec un concurrent ou une version antérieure. De plus, sa rapidité d'utilisation permet de l'intégrer facilement à la fin d'une session de test ou d'un processus d'intégration, sans perturber significativement les participants.

Ses limites sont tout aussi importantes. Le SUS mesure la perception, et non la performance : un produit peut obtenir un bon score alors que les utilisateurs échouent à certaines tâches, surtout si l’interface est agréable et que ces échecs sont attribués à leur propre erreur. Il produit un simple chiffre sans diagnostic, signalant un problème sans en préciser la nature, ce qui implique qu’il doit être associé à des méthodes qualitatives pour être exploitable. De plus, il est sensible au moment et à la manière dont il est administré ; les comparaisons ne sont donc valables que dans des conditions constantes. Enfin, il ne convient pas à l’évaluation d’un écran ou d’une fonctionnalité spécifique, mais plutôt à l’appréciation de l’expérience globale.

Il existe des alternatives intéressantes qui répondent à des objectifs légèrement différents. Les questionnaires plus courts, comportant moins d'items, allègent la charge des répondants lorsqu'ils sont intégrés à une expérience utilisateur réelle plutôt qu'à une session de recherche. Les instruments conçus spécifiquement pour les sites web ou certaines catégories de produits peuvent être plus pertinents dans leur domaine. Les mesures de facilité perçue, basées sur un seul item et posées immédiatement après une tâche spécifique, permettent un diagnostic précis de la tâche, contrairement à une évaluation globale de l'expérience. En pratique, il est conseillé de choisir un instrument, de l'utiliser de manière cohérente et de résister à la tentation d'en changer en cas de résultat décevant, car modifier l'instrument annule la tendance et compromet la comparabilité qui faisait la valeur de l'exercice.

Utilisée correctement, elle fonctionne comme un indicateur de suivi plutôt que comme un outil de diagnostic, ce qui explique son intégration dans le travail en cours. recherche d'utilisateurs Dans ce programme, le SUS fournit une mesure longitudinale cohérente permettant de déterminer si l'expérience s'améliore, tandis que l'explication de toute évolution provient de l'observation des séances et d'entretiens. la conception des produits Dans le cadre de projets impliquant une refonte, un score de référence établi avant les travaux et répété après constitue l'un des rares éléments de preuve qui résistent aux désaccords habituels quant à savoir si la nouvelle version est réellement meilleure.