ICE 채점 모델

ICE 채점 모델은 영향력, 확신도, 용이성이라는 세 가지 차원에서 각 아이디어를 평가하여 우선순위를 정합니다. 일반적으로 1부터 10까지의 척도로 평가하고, 각 점수를 곱하거나 평균을 내어 순위를 매깁니다. 션 엘리스가 개발하고 성장 팀에서 널리 사용되는 이 모델은 의도적으로 간소화되어 있으며, 가치에 대한 타당한 추정치를 산출하기보다는 백로그를 신속하게 정리하는 데 중점을 둡니다.

이 모델의 구성 요소는 아이디어가 실행 가치가 있는지 여부를 실제로 결정하는 질문과 연결됩니다. 영향력은 아이디어가 성공했을 때 목표 지표에 얼마나 변화를 가져올지 추정합니다. 확신도는 열정보다는 뒷받침하는 증거를 바탕으로 팀이 아이디어의 성공을 얼마나 확신하는지를 나타냅니다. 용이성은 필요한 노력의 양을 추정하는데, 이는 비용의 역수이며, 적은 노력으로 여러 실험을 진행하는 것이 적은 노력으로 여러 번의 비싼 실험을 하는 것보다 분기별 학습 효과가 더 크기 때문에 포함되었습니다.

확신도 차원은 이 모델을 단순한 영향력 대비 노력 순위 모델과 구분 짓는 핵심 요소이며, 가장 흔히 부주의하게 적용되는 부분이기도 합니다. 확신도는 증거를 반영해야 합니다. 회의 녹음, 분석 자료, 고객 인터뷰, 그리고 이전에 관찰된 유사한 결과로 뒷받침되는 가설은 높은 점수를 받을 만하지만, 회의에서 누군가가 설득력 있다고 느낀 아이디어는 그렇지 않습니다. 증거가 아닌 확신에 따라 확신도를 부여하는 팀은 이 모델을 의견 순위 매기기 도구로 전락시키게 되는데, 이는 이 모델이 원래 의도했던 바와는 정반대되는 것입니다.

이 프레임워크의 약점은 점수가 주관적이며, 계산 방식이 점수에 과도한 권위를 부여한다는 점입니다. 두 사람이 같은 아이디어에 대해 매우 다른 점수를 줄 수 있으며, 불확실한 세 가지 추정치를 곱하면 입력값이 뒷받침하는 것보다 훨씬 더 정확해 보이는 숫자가 나옵니다. 240점은 210점보다 의미 있게 더 나은 점수가 아니며, 순위를 정확한 것으로 간주하는 것은 오용입니다. 이 모델은 계산 도구라기보다는 명백한 우선순위와 명백한 비우선순위를 구분하고 의견 불일치에 대한 논의를 구조화하는 정렬 메커니즘으로 기능해야 합니다.

일관성이 있어야 실제로 활용 가능합니다. 동일한 사람들이 같은 세션에서 공통된 정의를 사용하여 점수를 매길 때, 절대값이 임의적일지라도 상대적 비교는 가능하므로 점수 시스템은 비교적 잘 작동합니다. 하지만 서로 다른 사람들이 합의된 기준 없이 다른 시점에 점수를 매기거나, 아이디어마다 다른 지표를 사용하여 영향력을 평가하거나, 아이디어를 제안한 사람이 점수를 매기는 경우에는 점수 시스템이 제대로 작동하지 않습니다. 그룹으로 점수를 매기고, 각 점수의 의미를 예시와 함께 명확히 정의하고, 신뢰도 점수에 대한 근거를 명시하도록 요구하는 등의 간단한 규칙을 정하면 이러한 문제들을 대부분 해결할 수 있습니다.

다양한 프레임워크를 비교하는 것보다는 하나를 선택하여 일관되게 적용하는 것이 더 유용합니다. 왜냐하면 모든 점수 모델의 가장 큰 장점은 우선순위 결정의 근거를 명확히 제시하고 아이디어 간 비교 가능성을 높여준다는 점이기 때문입니다. 도달 범위와 영향력을 구분하거나 노력을 제수로 사용하는 등 더욱 정교한 프레임워크는 정확도를 높여주지만, 기본 추정치의 질이 낮을 경우 그 정확도는 실효성이 떨어집니다. 하지만 개별 항목의 비용이 매우 높아 순위가 진정으로 중요한 경우에는 이러한 프레임워크를 사용하는 데 드는 추가적인 노력을 투자할 가치가 있을 수 있습니다. 모든 프레임워크의 공통적인 실패 원인은 결과를 입력값이 아닌 결정으로 취급하는 데 있으며, 이미 도출된 결론을 정당화하기 위해 점수를 부여한다면 어떤 프레임워크든 좋지 않은 결과를 초래할 것입니다.

ICE는 보다 정교한 프레임워크에 대한 더 빠른 대안으로 이해하는 것이 가장 좋으며, 각 항목의 비용이 낮고 후보 항목이 많은 경우, 즉 대부분의 실험 백로그에 적합한 경우에 적합합니다. CRO 서비스 이 프로그램은 일반적으로 각 계획 회의에서 테스트 아이디어의 순서를 정하는 데 사용되며, 각 테스트의 표본 크기와 예상 실행 시간을 점수와 함께 고려합니다. 예를 들어, 점수는 높지만 두 달 동안 트래픽이 필요한 아이디어는 10일 안에 해결되는 아이디어와는 경쟁 관계가 다르기 때문입니다.