Tỷ lệ thành công của nhiệm vụ

Tỷ lệ hoàn thành nhiệm vụ là tỷ lệ người tham gia hoàn thành chính xác một nhiệm vụ được xác định. Đây là chỉ số đo lường khả năng sử dụng cơ bản nhất, bởi vì nó đo lường xem giao diện có thực sự đáp ứng được nhu cầu của người dùng hay không, và là thước đo mà mọi thứ khác, bao gồm sự hài lòng, tốc độ và sở thích thẩm mỹ, đều là thứ yếu. Một sản phẩm mà người dùng thích nhưng không thể sử dụng được thì không phải là một sản phẩm thành công.

Việc đo lường đòi hỏi phải quyết định trước điều gì được coi là thành công, và định nghĩa này sẽ quyết định giá trị của mọi thứ tiếp theo. Hệ thống chấm điểm nhị phân ghi nhận việc hoàn thành hoặc thất bại, phù hợp với các nhiệm vụ có kết quả cuối cùng rõ ràng như hoàn thành một giao dịch mua bán. Các mức độ thành công bao gồm việc hoàn thành một phần, ghi nhận xem người đó hoàn thành mà không cần trợ giúp, hoàn thành với khó khăn, hoàn thành với sự trợ giúp, hay thất bại. Điều quan trọng là tiêu chí phải được xác định trước các buổi thực hiện, vì việc quyết định sau đó xem một kết quả có được tính hay không sẽ dẫn đến sự hiểu sai lệch mà hệ thống đo lường này nhằm mục đích ngăn chặn.

Chỉ số này đặc biệt thuyết phục các bên liên quan vì tính cụ thể của nó. Việc báo cáo rằng bốn trong mười người tham gia không tìm thấy chính sách hoàn trả, hoặc một nửa không hoàn tất đăng ký qua điện thoại, truyền đạt thông tin một cách hiệu quả hơn so với mô tả định tính. Nó cũng dễ dàng chuyển đổi sang thuật ngữ thương mại, vì tỷ lệ thất bại trong một nhiệm vụ quan trọng đối với doanh thu có thể được liên kết trực tiếp với các giao dịch bị mất, và mối liên hệ đó thường đảm bảo nguồn lực để khắc phục.

Việc diễn giải kết quả đòi hỏi sự cẩn trọng về kích thước mẫu. Các nghiên cứu về khả năng sử dụng thường chỉ bao gồm từ năm đến mười hai người tham gia, điều này phù hợp để xác định các vấn đề nhưng lại tạo ra tỷ lệ rất không chính xác: hai lỗi trên tám trường hợp tương thích với một phạm vi giá trị thực rộng. Việc báo cáo tỷ lệ phần trăm từ một mẫu như vậy như thể đó là ước tính của toàn bộ dân số sẽ phóng đại khả năng nghiên cứu, và cách trình bày trung thực là cung cấp số liệu thô cùng với bất kỳ tỷ lệ phần trăm nào. Khi tỷ lệ chính xác thực sự quan trọng, việc thử nghiệm không có người điều khiển ở quy mô lớn hơn hoặc phân tích có sử dụng công cụ trên sản phẩm đang hoạt động là những công cụ phù hợp.

Chỉ số này cũng chỉ tốt khi các nhiệm vụ được lựa chọn phù hợp. Những nhiệm vụ phản ánh những gì người dùng thực sự cố gắng thực hiện, được diễn đạt bằng ngôn ngữ quen thuộc của họ và đặt trong một tình huống thực tế, sẽ tạo ra kết quả có ý nghĩa. Các nhiệm vụ được viết bằng thuật ngữ của giao diện chỉ đo lường sự trùng khớp từ ngữ. Những nhiệm vụ bị giới hạn một cách giả tạo, hoặc những nhiệm vụ mà không người dùng thực sự nào sẽ thử, sẽ tạo ra những con số trông có vẻ chính xác nhưng không có ý nghĩa gì. Việc lựa chọn đúng nhiệm vụ thường đòi hỏi kiến ​​thức trước đó về mục tiêu thực tế của người dùng, được rút ra từ phân tích, dữ liệu hỗ trợ hoặc nghiên cứu định tính trước đó.

Việc so sánh tỷ lệ thành công với một tiêu chuẩn đòi hỏi phải cẩn trọng về ý nghĩa của tiêu chuẩn đó. Các số liệu được công bố về tỷ lệ hoàn thành nhiệm vụ trung bình trong các nghiên cứu được lấy từ các sản phẩm, nhiệm vụ và nhóm người tham gia rất khác nhau, và việc so sánh một tỷ lệ cụ thể với chúng không mang lại nhiều giá trị. Các so sánh hữu ích hơn là so sánh nội bộ: cùng một nhiệm vụ được đo lường trước và sau khi thay đổi, cùng một nhiệm vụ được đo lường trên các phân khúc hoặc thiết bị khác nhau, hoặc cùng một nhiệm vụ được so sánh với đối thủ cạnh tranh được thử nghiệm trong điều kiện giống hệt nhau. So sánh với đối thủ cạnh tranh đặc biệt thuyết phục với các bên liên quan, vì một khoảng cách rõ ràng trong một nhiệm vụ mà khách hàng thực hiện thường xuyên khó có thể bị bác bỏ hơn là một mối lo ngại trừu tượng về khả năng sử dụng.

Tỷ lệ thành công sẽ hữu ích nhất khi được kết hợp với lý do dẫn đến thất bại, vì tỷ lệ này xác định mức độ nghiêm trọng còn quan sát giúp xác định nguyên nhân. Việc kết hợp như vậy là thông lệ tiêu chuẩn trong một nhóm nghiên cứu. nghiên cứu người dùng chương trình, và danh sách ưu tiên các nhiệm vụ có tỷ lệ thất bại cao thu được thường là đầu vào đáng tin cậy nhất cho kế hoạch khắc phục do một chương trình tạo ra. Kiểm tra trải nghiệm người dùngBởi vì nó xếp hạng các vấn đề dựa trên tác động đo lường được đến các mục tiêu thực tế chứ không phải dựa trên ý kiến ​​chuyên gia về mức độ nghiêm trọng của chúng.