O modelo de pontuação ICE prioriza ideias classificando cada uma em três dimensões: impacto, confiança e facilidade, geralmente em uma escala de um a dez, e multiplicando ou calculando a média das pontuações para gerar uma classificação. Associado a Sean Ellis e amplamente utilizado em equipes de crescimento, ele é propositalmente simplificado, projetado para priorizar rapidamente uma lista de pendências em vez de produzir uma estimativa de valor consistente.
Seus componentes correspondem às perguntas que realmente determinam se uma ideia vale a pena ser implementada. O impacto estima o quanto a mudança afetaria a métrica-alvo se funcionasse. A confiança estima o grau de certeza da equipe de que a mudança funcionará, com base em evidências concretas e não em entusiasmo. A facilidade estima o mínimo de esforço necessário, que é o inverso do custo e está incluída porque um conjunto de experimentos de baixo custo gera mais aprendizado por trimestre do que um pequeno número de experimentos caros.
A dimensão da confiança é o que distingue o modelo de uma classificação mais simples de impacto versus esforço, e é a que é aplicada com mais frequência de forma descuidada. A confiança deve refletir evidências: uma hipótese apoiada por gravações de sessões, análises, entrevistas com clientes e um resultado semelhante observado anteriormente merece uma pontuação alta, enquanto uma ideia que alguém considerou convincente em uma reunião não. Equipes que atribuem confiança com base em convicção em vez de evidências transformam o modelo em um mecanismo para classificar opiniões, que é justamente o que ele deveria substituir.
A fragilidade da estrutura reside no fato de as pontuações serem subjetivas e a aritmética lhes conferir uma autoridade injustificada. Duas pessoas podem pontuar a mesma ideia de maneiras muito diferentes, e a multiplicação de três estimativas incertas produz um número com uma precisão aparente muito maior do que a que os dados de entrada suportam. Uma pontuação de 240 não é significativamente melhor do que uma de 210, e tratar a classificação como exata é um uso inadequado. O modelo funciona como um mecanismo de classificação para separar prioridades óbvias de despriorizações óbvias e para estruturar a discussão sobre divergências, e não como um cálculo.
A consistência é o que torna o sistema utilizável na prática. A pontuação funciona razoavelmente bem quando as mesmas pessoas pontuam na mesma sessão, usando definições compartilhadas, já que as comparações relativas se mantêm mesmo que os valores absolutos sejam arbitrários. O sistema falha quando pessoas diferentes pontuam em momentos diferentes sem parâmetros de referência acordados, quando o impacto é avaliado com base em métricas diferentes para ideias diferentes ou quando as pontuações são atribuídas por quem propôs a ideia. Convenções simples, como pontuar em grupo, definir o significado de cada nível com exemplos e exigir que as evidências que sustentam uma pontuação de confiança sejam apresentadas, resolvem a maior parte desses problemas.
Comparar diferentes modelos é menos útil do que escolher um e aplicá-lo de forma consistente, visto que o principal benefício de qualquer modelo de pontuação é tornar explícito e comparável o raciocínio por trás da priorização entre diferentes ideias. Modelos mais elaborados, que separam alcance de impacto ou que incorporam esforço como divisor, adicionam uma precisão que é em grande parte ilusória, dada a qualidade das estimativas subjacentes, embora possam valer o esforço adicional quando os itens individuais são suficientemente dispendiosos para que a classificação seja realmente relevante. A falha comum a todos eles é tratar o resultado como uma decisão em vez de um insumo, e qualquer modelo produzirá resultados insatisfatórios se as pontuações forem atribuídas para justificar uma conclusão já alcançada.
O ICE é melhor compreendido como uma alternativa mais rápida a estruturas mais elaboradas, apropriada quando o custo de cada item é baixo e o número de candidatos é alto, o que descreve a maioria dos atrasos em experimentação. Em um Serviço CRO É comum usar esse programa para ordenar ideias de teste em cada sessão de planejamento, considerando o tamanho da amostra e o tempo de execução esperado de cada teste juntamente com a pontuação, já que uma ideia com boa pontuação, mas que requer dois meses de tráfego, compete de forma diferente de uma que se resolve em dez dias.