SwitasLiên hệ

Kiểm thử đa biến (Multivariate Testing)

Kiểm thử đa biến (multivariate testing, MVT) là phương pháp thử nghiệm dùng để xác định cách nhiều yếu tố trên trang tương tác với nhau, bằng cách đồng thời thử nghiệm nhiều biến thể của hai hay nhiều thành phần trên cùng một trang và đo lường tác động tổng hợp lên một chỉ số mục tiêu như tỷ lệ chuyển đổi. Trong khi một thử nghiệm A/B tiêu chuẩn so sánh một biến thể trang hoàn chỉnh với biến thể khác, một thử nghiệm đa biến có thể thay đổi tiêu đề theo hai cách và ảnh hero theo ba cách cùng lúc, tạo ra sáu tổ hợp riêng biệt được hiển thị cho các phân khúc lưu lượng khác nhau. Kết quả không chỉ cho biết tổ hợp nào hiệu quả nhất về tổng thể mà còn cho thấy đóng góp riêng của từng yếu tố và liệu các yếu tố có tương tác với nhau hay không, nghĩa là tác động của một thành phần phụ thuộc vào việc nó được ghép với phiên bản nào của thành phần khác. Cách tiếp cận này có giá trị khi một đội ngũ cần hiểu những yếu tố cụ thể nào của trang đang thúc đẩy hiệu quả, thay vì chỉ xác nhận rằng một bản thiết kế lại toàn diện vượt trội hơn bản khác. Chẳng hạn, một trang đích được thiết kế lại và thử nghiệm như một biến thể A/B duy nhất có thể chiến thắng, nhưng nếu không có kiểm thử đa biến thì không thể biết mức cải thiện đến từ tiêu đề mới, vị trí mới của biểu mẫu hay hình ảnh được cập nhật, một thông tin quan trọng khi áp dụng những bài học này cho các trang khác. Kiểm thử đa biến hữu ích nhất với các trang có lưu lượng cao, vì yêu cầu thống kê để phát hiện sự khác biệt có ý nghĩa giữa nhiều tổ hợp, thường gọi là các ô (cell), tăng lên đáng kể theo mỗi biến số bổ sung; một thiết kế giai thừa đầy đủ (full factorial) với hai biến số, mỗi biến ba biến thể, cần chín ô, và mỗi ô cần có cỡ mẫu đủ lớn, thường là hàng trăm hoặc hàng nghìn chuyển đổi mỗi ô, để đạt ý nghĩa thống kê đáng tin cậy. Do yêu cầu về lưu lượng này, MVT thường chỉ dành cho những trang vốn đã có lượng truy cập lớn, chẳng hạn trang chủ thương mại điện tử hoặc trang sản phẩm có ý định mua cao, và kém thực tế hơn với các trang có lưu lượng thấp như trang đích B2B ngách, nơi một chuỗi các thử nghiệm A/B đơn giản nối tiếp nhau thường đạt được kết luận khả thi nhanh hơn. Các nền tảng thử nghiệm thường cung cấp hai cách tiếp cận thống kê cho kiểm thử đa biến: giai thừa đầy đủ, thử nghiệm mọi tổ hợp có thể để thu được nhiều thông tin nhất, và giai thừa một phần hoặc phương pháp Taguchi, chỉ thử nghiệm một tập con các tổ hợp để đạt kết luận nhanh hơn với cái giá là mất đi một phần dữ liệu về tương tác. Một hiểu lầm thường gặp là coi kiểm thử đa biến chỉ đơn giản là cách chạy nhiều thử nghiệm A/B cùng lúc nhanh hơn; thực tế, nó đòi hỏi nhiều lưu lượng hơn đáng kể và thời gian thử nghiệm dài hơn để đạt cùng mức tin cậy thống kê như một thử nghiệm A/B đơn lẻ, vì lưu lượng bị chia cho nhiều biến thể hơn rất nhiều. Chạy một thử nghiệm đa biến thiếu năng lực thống kê (underpowered), tức khi chưa đạt cỡ mẫu cần thiết cho mỗi ô mà đã diễn giải kết quả, là một trong những nguyên nhân phổ biến nhất dẫn đến kết luận sai trong công việc tối ưu hóa chuyển đổi, cùng với việc dừng thử nghiệm quá sớm dựa trên kết quả dẫn đầu của tuần đầu tiên thay vì toàn bộ thời gian thử nghiệm đã lên kế hoạch, thường được đặt từ hai đến bốn tuần để tính đến tính mùa vụ theo tuần. Trong hoạt động tư vấn CRO, kiểm thử đa biến thường được xem là công cụ nâng cao, dùng sau khi các thử nghiệm A/B đơn giản hơn đã xác nhận hướng đi chung của một giả thuyết, dành cho những tình huống khách hàng có đủ lưu lượng và muốn hiểu chi tiết yếu tố cụ thể nào của trang cần ưu tiên trong các công việc thiết kế sau này. Các chuyên gia tư vấn thường kết hợp kết quả MVT với nghiên cứu định tính, chẳng hạn bản đồ nhiệt hoặc phỏng vấn người dùng, để giải thích không chỉ tổ hợp nào thắng về mặt số liệu mà còn vì sao người dùng phản ứng với nó, biến một thử nghiệm đơn lẻ thành nguyên tắc thiết kế có thể tái sử dụng và áp dụng cho cả những trang ngoài trang được thử nghiệm ban đầu. Hãy xem một ví dụ cụ thể: một nhóm phụ trách trang sản phẩm thương mại điện tử muốn thử nghiệm đồng thời hai biến thể tiêu đề và hai phong cách hình ảnh sản phẩm. Một thử nghiệm đa biến giai thừa đầy đủ tạo ra bốn tổ hợp, và nếu trang có tỷ lệ chuyển đổi cơ sở là 5 phần trăm và nhóm muốn phát hiện chắc chắn mức cải thiện tương đối 10 phần trăm ở bất kỳ ô nào, cỡ mẫu cần thiết cho mỗi ô có thể dễ dàng lên đến vài nghìn khách truy cập, nghĩa là trang sẽ cần hàng chục nghìn khách truy cập tổng cộng trước khi thử nghiệm kết thúc. Nếu trang chỉ nhận được vài nghìn lượt truy cập mỗi tháng, cũng thử nghiệm đó sẽ mất nhiều tháng để đạt ý nghĩa thống kê, và khi ấy việc chạy hai thử nghiệm A/B nối tiếp, trước hết tách riêng tiêu đề rồi đến hình ảnh, thường sẽ cho ra câu trả lời tự tin, khả thi sớm hơn nhiều.

Thêm thuật ngữ bắt đầu bằng M

Hãy cùng xây dựng sản phẩm tiếp theo.

Liên hệ