Mô hình chấm điểm ICE

Mô hình chấm điểm ICE ưu tiên các ý tưởng bằng cách đánh giá từng ý tưởng dựa trên ba khía cạnh: tác động, độ tin cậy và tính dễ thực hiện, thường trên thang điểm từ một đến mười, sau đó nhân hoặc tính trung bình các điểm số để đưa ra thứ hạng. Được gắn liền với Sean Ellis và được sử dụng rộng rãi trong các nhóm phát triển, mô hình này được thiết kế đơn giản, nhằm mục đích sắp xếp nhanh chóng danh sách công việc tồn đọng hơn là đưa ra ước tính giá trị có thể bảo vệ được.

Các thành phần của nó tương ứng với những câu hỏi thực sự quyết định xem một ý tưởng có đáng thực hiện hay không. Tác động ước tính mức độ thay đổi sẽ ảnh hưởng đến chỉ số mục tiêu như thế nào nếu nó thành công. Độ tin cậy ước tính mức độ chắc chắn của nhóm về việc nó sẽ thành công, dựa trên bằng chứng hỗ trợ chứ không phải sự nhiệt tình. Độ dễ thực hiện ước tính mức độ nỗ lực cần thiết, là nghịch đảo của chi phí và được đưa vào vì một loạt các thử nghiệm chi phí thấp tạo ra nhiều bài học hơn mỗi quý so với một số ít thử nghiệm tốn kém.

Yếu tố độ tin cậy là điều phân biệt mô hình này với cách xếp hạng đơn giản hơn dựa trên tác động so với nỗ lực, và đây cũng là yếu tố thường bị áp dụng thiếu cẩn trọng nhất. Độ tin cậy cần phản ánh bằng chứng: một giả thuyết được hỗ trợ bởi các bản ghi phiên họp, phân tích dữ liệu, phỏng vấn khách hàng và kết quả tương tự đã được quan sát trước đó xứng đáng được điểm cao, trong khi một ý tưởng mà ai đó thấy thuyết phục trong một cuộc họp thì không. Các nhóm gán độ tin cậy dựa trên niềm tin chứ không phải bằng chứng sẽ biến mô hình thành một cơ chế xếp hạng ý kiến, điều mà nó vốn được tạo ra để thay thế.

Điểm yếu của khung phân tích này là điểm số mang tính chủ quan và phép tính toán mang lại cho chúng độ chính xác không chính đáng. Hai người có thể chấm điểm cùng một ý tưởng rất khác nhau, và việc nhân ba ước tính không chắc chắn lại tạo ra một con số có vẻ chính xác hơn nhiều so với dữ liệu đầu vào. Điểm 240 không tốt hơn đáng kể so với điểm 210, và việc coi thứ hạng là chính xác tuyệt đối là một sự lạm dụng. Mô hình này hoạt động như một cơ chế phân loại để tách biệt các ưu tiên rõ ràng khỏi các yếu tố bị giảm ưu tiên rõ ràng, và để định hướng thảo luận về sự bất đồng, chứ không phải là một phép tính toán.

Tính nhất quán là yếu tố giúp phương pháp này có thể sử dụng được trong thực tế. Việc chấm điểm hoạt động khá tốt khi cùng một nhóm người chấm điểm trong cùng một phiên làm việc bằng cách sử dụng các định nghĩa chung, vì các so sánh tương đối vẫn đúng ngay cả khi các giá trị tuyệt đối là tùy ý. Phương pháp này sẽ gặp trục trặc khi những người khác nhau chấm điểm vào những thời điểm khác nhau mà không có các tiêu chí đánh giá thống nhất, khi tác động được chấm điểm dựa trên các chỉ số khác nhau cho các ý tưởng khác nhau, hoặc khi điểm số được gán bởi người đề xuất ý tưởng. Các quy ước đơn giản, chẳng hạn như chấm điểm theo nhóm, định nghĩa ý nghĩa của từng cấp độ bằng các ví dụ và yêu cầu phải nêu rõ bằng chứng đằng sau điểm số độ tin cậy, sẽ giải quyết hầu hết các vấn đề này.

Việc so sánh các khung đánh giá ít hữu ích hơn so với việc chọn một khung và áp dụng nó một cách nhất quán, vì lợi ích chính của bất kỳ mô hình chấm điểm nào là nó làm cho lý do đằng sau việc ưu tiên trở nên rõ ràng và có thể so sánh được giữa các ý tưởng. Các khung đánh giá phức tạp hơn, tách biệt phạm vi tiếp cận khỏi tác động, hoặc kết hợp nỗ lực như một hệ số chia, sẽ tăng độ chính xác mà phần lớn là ảo tưởng do chất lượng của các ước tính cơ bản, mặc dù chúng có thể đáng giá với nỗ lực bổ sung khi các hạng mục riêng lẻ đủ tốn kém đến mức thứ hạng thực sự quan trọng. Lỗi phổ biến của tất cả các khung này là coi đầu ra như một quyết định chứ không phải là một đầu vào, và bất kỳ khung nào cũng sẽ tạo ra kết quả kém nếu điểm số được gán để biện minh cho một kết luận đã đạt được.

ICE được hiểu rõ nhất như một giải pháp thay thế nhanh hơn cho các khung công tác phức tạp hơn, phù hợp khi chi phí của mỗi hạng mục thấp và số lượng ứng viên cao, điều này mô tả hầu hết các trường hợp tồn đọng thử nghiệm. Trong một Dịch vụ CRO Chương trình này thường được sử dụng để sắp xếp các ý tưởng thử nghiệm trong mỗi phiên lập kế hoạch, với kích thước mẫu và thời gian chạy dự kiến ​​của mỗi thử nghiệm được xem xét cùng với điểm số, vì một ý tưởng đạt điểm cao nhưng cần hai tháng lưu lượng truy cập sẽ cạnh tranh khác với một ý tưởng được giải quyết trong mười ngày.