Μοντέλο Βαθμολόγησης ICE

Το μοντέλο βαθμολόγησης ICE ιεραρχεί τις ιδέες αξιολογώντας την καθεμία με βάση τρεις διαστάσεις: αντίκτυπο, εμπιστοσύνη και ευκολία, συνήθως σε κλίμακα από το ένα έως το δέκα, και πολλαπλασιάζοντας ή υπολογίζοντας τον μέσο όρο των βαθμολογιών για να προκύψει μια κατάταξη. Συνδεδεμένο με τον Sean Ellis και ευρέως χρησιμοποιούμενο σε ομάδες ανάπτυξης, είναι σκόπιμα ελαφρύ, σχεδιασμένο για να παραγγέλνει γρήγορα ένα ανεκτέλεστο έργο αντί να παράγει μια αξιόπιστη εκτίμηση αξίας.

Τα στοιχεία του αντιστοιχίζονται στις ερωτήσεις που καθορίζουν πραγματικά αν μια ιδέα αξίζει να εφαρμοστεί. Η επίδραση εκτιμά πόσο η αλλαγή θα μετατόπιζε το μετρικό στόχο αν λειτουργούσε. Η εμπιστοσύνη εκτιμά πόσο σίγουρη είναι η ομάδα ότι θα λειτουργήσει, με βάση τα υποστηρικτικά στοιχεία και όχι τον ενθουσιασμό. Η ευκολία εκτιμά πόσο λίγη προσπάθεια απαιτείται, η οποία είναι το αντίστροφο του κόστους και περιλαμβάνεται επειδή ένα χαρτοφυλάκιο φθηνών πειραμάτων παράγει περισσότερη μάθηση ανά τρίμηνο από έναν μικρό αριθμό ακριβών.

Η διάσταση της εμπιστοσύνης είναι αυτό που διακρίνει το μοντέλο από την απλούστερη κατάταξη αντίκτυπου έναντι προσπάθειας και είναι αυτή που εφαρμόζεται συχνότερα απρόσεκτα. Η εμπιστοσύνη θα πρέπει να αντικατοπτρίζει τα στοιχεία: μια υπόθεση που υποστηρίζεται από καταγραφές συνεδριών, αναλυτικά στοιχεία, συνεντεύξεις πελατών και ένα παρόμοιο αποτέλεσμα που παρατηρήθηκε προηγουμένως αξίζει υψηλή βαθμολογία, ενώ μια ιδέα που κάποιος βρήκε συναρπαστική σε μια συνάντηση δεν αξίζει. Οι ομάδες που αποδίδουν εμπιστοσύνη με βάση την πεποίθηση και όχι τα στοιχεία μετατρέπουν το μοντέλο σε μηχανισμό κατάταξης απόψεων, κάτι που προοριζόταν να αντικαταστήσει.

Η αδυναμία του πλαισίου είναι ότι οι βαθμολογίες είναι υποκειμενικές και η αριθμητική τους δίνει αδικαιολόγητη αυθεντία. Δύο άτομα μπορούν να βαθμολογήσουν την ίδια ιδέα πολύ διαφορετικά, και ο πολλαπλασιασμός τριών αβέβαιων εκτιμήσεων παράγει έναν αριθμό με πολύ μεγαλύτερη φαινομενική ακρίβεια από ό,τι υποστηρίζουν τα δεδομένα εισόδου. Μια βαθμολογία 240 δεν είναι ουσιαστικά καλύτερη από μια βαθμολογία 210, και η αντιμετώπιση της κατάταξης ως ακριβούς αποτελεί κακή χρήση. Το μοντέλο λειτουργεί ως μηχανισμός ταξινόμησης για να διαχωρίζει τις προφανείς προτεραιότητες από τις προφανείς υποβαθμίσεις και να δομεί τη συζήτηση σχετικά με τη διαφωνία, παρά ως υπολογισμός.

Η συνέπεια είναι αυτό που την καθιστά εύχρηστη στην πράξη. Η βαθμολόγηση λειτουργεί λογικά όταν τα ίδια άτομα βαθμολογούνται στην ίδια συνεδρία χρησιμοποιώντας κοινούς ορισμούς, καθώς οι σχετικές συγκρίσεις ισχύουν ακόμη και αν οι απόλυτες τιμές είναι αυθαίρετες. Καταρρέει όταν διαφορετικά άτομα βαθμολογούνται σε διαφορετικές χρονικές στιγμές χωρίς συμφωνημένες βάσεις, όταν η επίδραση βαθμολογείται με βάση διαφορετικές μετρήσεις για διαφορετικές ιδέες ή όταν οι βαθμολογίες αποδίδονται από όποιον πρότεινε την ιδέα. Απλές συμβάσεις, όπως η βαθμολόγηση ως ομάδα, ο ορισμός του τι σημαίνει κάθε επίπεδο με παραδείγματα και η απαίτηση να αναφέρονται τα στοιχεία πίσω από μια βαθμολογία εμπιστοσύνης, επιλύουν το μεγαλύτερο μέρος αυτού του ζητήματος.

Η σύγκριση πλαισίων είναι λιγότερο χρήσιμη από την επιλογή ενός και την εφαρμογή του με συνέπεια, καθώς το κύριο πλεονέκτημα οποιουδήποτε μοντέλου βαθμολόγησης είναι ότι καθιστά τη συλλογιστική πίσω από την ιεράρχηση σαφή και συγκρίσιμη μεταξύ ιδεών. Τα πιο περίτεχνα πλαίσια που διαχωρίζουν την εμβέλεια από τον αντίκτυπο ή που ενσωματώνουν την προσπάθεια ως διαιρέτη, προσθέτουν ακρίβεια που είναι σε μεγάλο βαθμό απατηλή δεδομένης της ποιότητας των υποκείμενων εκτιμήσεων, αν και μπορεί να αξίζουν την πρόσθετη προσπάθεια όπου τα μεμονωμένα στοιχεία είναι αρκετά ακριβά ώστε η κατάταξη να έχει πραγματικά σημασία. Ο κοινός τρόπος αποτυχίας σε όλα αυτά είναι η αντιμετώπιση του αποτελέσματος ως απόφασης και όχι ως εισροής, και οποιοδήποτε πλαίσιο θα παράγει κακά αποτελέσματα εάν οι βαθμολογίες αποδίδονται για να δικαιολογήσουν ένα συμπέρασμα που έχει ήδη επιτευχθεί.

Το ICE γίνεται καλύτερα κατανοητό ως μια ταχύτερη εναλλακτική λύση σε πιο περίπλοκα πλαίσια, κατάλληλη όπου το κόστος κάθε στοιχείου είναι χαμηλό και ο αριθμός των υποψηφίων είναι υψηλός, γεγονός που περιγράφει τις περισσότερες εκκρεμότητες πειραματισμού. Υπηρεσία CRO Χρησιμοποιείται συνήθως για την παραγγελία ιδεών για δοκιμές σε κάθε συνεδρία σχεδιασμού, με το μέγεθος του δείγματος και τον αναμενόμενο χρόνο εκτέλεσης κάθε δοκιμής να λαμβάνονται υπόψη παράλληλα με τη βαθμολογία, καθώς μια ιδέα που βαθμολογείται καλά αλλά απαιτεί δύο μήνες επισκεψιμότητας ανταγωνίζεται διαφορετικά από μια ιδέα που επιλύεται σε δέκα ημέρες.