Tốc độ thử nghiệm là tỷ lệ mà một tổ chức hoàn thành các thử nghiệm hợp lệ, thường được biểu thị bằng số lượng thử nghiệm hoàn thành mỗi tháng hoặc mỗi quý. Đây là một trong những yếu tố dự báo mạnh mẽ nhất về giá trị mà một chương trình thử nghiệm tạo ra, vì một lý do đơn giản: nếu chỉ một số ít thử nghiệm tạo ra sự cải thiện đáng kể, thì số lượng cải thiện được tìm thấy phần lớn phụ thuộc vào số lượng thử nghiệm được thực hiện. Việc tăng gấp đôi tốc độ học hỏi, trong điều kiện các yếu tố khác không đổi, sẽ làm tăng gấp đôi hiệu ứng tích lũy đối với các chỉ số quan trọng.
Tốc độ thực hiện kiểm thử bị giới hạn bởi ba yếu tố riêng biệt, và việc xác định yếu tố nào gây ra sự giới hạn đó là bước đầu tiên để cải thiện nó. Lưu lượng truy cập đặt ra một giới hạn thống kê cứng: một trang web không thể chạy nhiều bài kiểm thử đồng thời, đủ mạnh hơn mức mà khối lượng truy cập của nó hỗ trợ. Năng lực sản xuất bao gồm việc tạo ý tưởng, thiết kế, xây dựng và đảm bảo chất lượng, và thường là yếu tố giới hạn trong các tổ chức mà mỗi bài kiểm thử đều yêu cầu công việc kỹ thuật. Quy trình bao gồm các chu kỳ phê duyệt, xem xét của các bên liên quan, phê duyệt pháp lý hoặc thương hiệu và thời gian phân tích, và thường là chi phí ẩn lớn nhất, với các bài kiểm thử nằm im trong hàng đợi lâu hơn thời gian chúng thu thập dữ liệu.
Tăng tốc độ bằng cách hạ thấp tiêu chuẩn là phản tác dụng và không may là khá phổ biến. Rút ngắn thời gian thực hiện xuống dưới một chu kỳ kinh doanh đầy đủ, bỏ qua tính toán cỡ mẫu, bỏ bê đảm bảo chất lượng, thử nghiệm những gì dễ dàng thay vì những gì quan trọng, và dừng thử nghiệm ngay khi có dấu hiệu đáng kể đầu tiên đều làm tăng số lượng thí nghiệm hoàn thành trong khi giảm số lượng kết quả thực sự. Một chương trình báo cáo 40 thử nghiệm mỗi quý với phương pháp không đáng tin cậy sẽ tạo ra ít giá trị hơn so với một chương trình báo cáo 12 thử nghiệm được thực hiện đúng cách, và nó gây ra nhiều nhầm lẫn trong tổ chức hơn vì kết quả của nó mâu thuẫn với nhau.
Các đòn bẩy năng suất chủ yếu tập trung vào việc loại bỏ thời gian chờ đợi hơn là rút ngắn thời gian thực hiện các bài kiểm tra. Duy trì danh sách ưu tiên các ý tưởng sẵn sàng để triển khai nhằm đảm bảo không bao giờ có công suất nhàn rỗi. Thiết lập thư viện thành phần và mẫu kiểm thử có thể tái sử dụng để giảm thời gian xây dựng. Thống nhất phê duyệt thường trực cho một nhóm thử nghiệm rủi ro thấp nhất định để mỗi thử nghiệm không cần phải được phê duyệt lại. Chạy đồng thời các bài kiểm tra không chồng chéo trên các khu vực khác nhau của trang web. Tự động hóa phân tích và báo cáo để kết quả có sẵn ngay trong ngày kết thúc thử nghiệm thay vì hai tuần sau đó. Không có biện pháp nào trong số này làm giảm tính nghiêm ngặt; tất cả đều giúp giảm thời gian giữa các thử nghiệm.
Tốc độ thực thi cũng nên được xem xét cùng với các thước đo chất lượng chứ không phải riêng lẻ. Các chỉ số bổ sung hữu ích bao gồm tỷ lệ các bài kiểm tra đạt được kết luận hợp lệ thay vì bị bỏ dở, tỷ lệ tạo ra bài học được ghi nhận bất kể kết quả, tỷ lệ các thử nghiệm nhắm đến các trang hoặc luồng có giá trị cao, và hiệu quả tích lũy được đo lường của chương trình thông qua một nhóm đối chứng không được phân tích. Một bảng điều khiển chỉ hiển thị tốc độ thực thi, như dự đoán, sẽ được tối ưu hóa bằng cách chạy thêm các bài kiểm tra đơn giản hơn.
Tính đồng thời cần được đặc biệt chú ý, bởi vì đây là đòn bẩy thường bị sử dụng một cách thiếu cẩn trọng nhất. Chạy nhiều thử nghiệm cùng một lúc sẽ làm tăng thông lượng khi các thử nghiệm ảnh hưởng đến các phần không liên quan của trải nghiệm, và tạo ra kết quả khó hiểu khi chúng chồng chéo nhau. Các quy tắc thực tế là phải liên kết mỗi thử nghiệm với các bước trong phễu và đối tượng mà nó tác động, tránh chạy hai thử nghiệm cùng lúc sửa đổi cùng một bước, và kiểm tra các hiệu ứng tương tác khi các thử nghiệm liền kề nhau thay vì giả định tính độc lập. Một số tổ chức giải quyết vấn đề này bằng cách duy trì một lịch trình chung về các thử nghiệm đang hoạt động với các khu vực bị ảnh hưởng được ghi lại, điều này không hào nhoáng nhưng ngăn ngừa tình huống phổ biến là hai nhóm vô tình thử nghiệm các thay đổi xung đột trên cùng một trang và cả hai đều báo cáo kết quả không rõ ràng mà không hiểu lý do tại sao.
Đối với hầu hết các tổ chức, con đường nhanh nhất để đạt được tốc độ cao hơn không phải là một công cụ mới mà là một mô hình vận hành rõ ràng hơn: ai đưa ra ý tưởng, ai ưu tiên, ai xây dựng, ai phê duyệt và mỗi bước được phép mất bao lâu. Việc thiết lập mô hình đó là một phần bình thường của quá trình phát triển. quản lý tăng trưởng Sự tham gia và nhịp độ đạt được thường phụ thuộc vào việc có đủ các giả thuyết được chuẩn bị kỹ lưỡng và có bằng chứng xác thực để duy trì nguồn lực, đó là lý do tại sao cần sự liên tục. nghiên cứu người dùng Nó xứng đáng được coi là một yếu tố đầu vào trong lộ trình thử nghiệm, thay vì chỉ là một dự án riêng biệt không thường xuyên.