ความเร็วในการทดลอง คืออัตราที่องค์กรดำเนินการทดลองที่ถูกต้องสมบูรณ์ โดยปกติจะแสดงเป็นจำนวนการทดสอบที่เสร็จสิ้นต่อเดือนหรือต่อไตรมาส นี่เป็นหนึ่งในตัวบ่งชี้ที่สำคัญที่สุดว่าโปรแกรมการทดสอบสร้างมูลค่าได้มากเพียงใด ด้วยเหตุผลที่ตรงไปตรงมา: หากมีเพียงส่วนน้อยของการทดลองเท่านั้นที่ก่อให้เกิดการปรับปรุงที่มีความหมาย จำนวนการปรับปรุงที่พบก็จะขึ้นอยู่กับจำนวนการทดลองที่ดำเนินการเป็นส่วนใหญ่ การเพิ่มอัตราการเรียนรู้เป็นสองเท่า โดยที่ปัจจัยอื่นๆ คงที่ จะทำให้ผลกระทบแบบทวีคูณต่อตัวชี้วัดที่สำคัญเพิ่มขึ้นเป็นสองเท่าโดยประมาณ
ความเร็วถูกจำกัดด้วยข้อจำกัดสามประการ และการระบุว่าข้อจำกัดใดเป็นตัวกำหนดนั้นเป็นขั้นตอนแรกในการปรับปรุงความเร็ว ปริมาณการใช้งานกำหนดขีดจำกัดทางสถิติที่ชัดเจน: เว็บไซต์ไม่สามารถทำการทดสอบพร้อมกันที่มีกำลังการประมวลผลเพียงพอได้มากกว่าปริมาณการใช้งานที่รองรับได้ กำลังการผลิตครอบคลุมการสร้างแนวคิด การออกแบบ การสร้าง และการประกันคุณภาพ และมักเป็นข้อจำกัดที่สำคัญที่สุดในองค์กรที่การทดสอบทุกครั้งต้องอาศัยงานด้านวิศวกรรม กระบวนการครอบคลุมวงจรการอนุมัติ การตรวจสอบจากผู้มีส่วนได้ส่วนเสีย การลงนามทางกฎหมายหรือแบรนด์ และระยะเวลาในการวิเคราะห์ และมักเป็นต้นทุนแฝงที่ใหญ่ที่สุด โดยการทดสอบจะค้างอยู่ในคิวเป็นเวลานานกว่าเวลาที่ใช้ในการรวบรวมข้อมูลเสียอีก
การเพิ่มความเร็วโดยการลดมาตรฐานลงนั้นเป็นการกระทำที่ไร้ประโยชน์และน่าเสียดายที่เกิดขึ้นบ่อยครั้ง การลดระยะเวลาดำเนินการให้ต่ำกว่ารอบธุรกิจเต็มรอบ การข้ามขั้นตอนการคำนวณขนาดตัวอย่าง การละทิ้งการประกันคุณภาพ การทดสอบสิ่งที่ง่ายแทนที่จะทดสอบสิ่งที่สำคัญ และการหยุดการทดสอบเมื่อพบสัญญาณบ่งชี้ความสำคัญครั้งแรก ล้วนเป็นการเพิ่มจำนวนการทดลองที่เสร็จสมบูรณ์ในขณะที่ลดจำนวนผลการค้นพบที่แท้จริงลง โปรแกรมที่รายงานการทดสอบสี่สิบครั้งต่อไตรมาสด้วยวิธีการที่ไม่น่าเชื่อถือจะสร้างคุณค่าน้อยกว่าโปรแกรมที่รายงานการทดสอบสิบสองครั้งที่ทำอย่างถูกต้อง และยังก่อให้เกิดความสับสนในองค์กรมากขึ้นเนื่องจากผลลัพธ์ขัดแย้งกันเอง
กลไกการเพิ่มประสิทธิภาพส่วนใหญ่เน้นไปที่การลดเวลารอคอยมากกว่าการลดระยะเวลาการทดสอบ เช่น การรักษารายการงานที่พร้อมสร้างไว้เป็นลำดับความสำคัญ เพื่อไม่ให้ทรัพยากรเหลือทิ้ง การสร้างคลังส่วนประกอบและแม่แบบการทดสอบที่สามารถนำกลับมาใช้ใหม่ได้ เพื่อลดเวลาในการสร้าง การตกลงอนุมัติแบบถาวรสำหรับกลุ่มการทดลองที่มีความเสี่ยงต่ำ เพื่อไม่ให้ต้องขออนุมัติใหม่ทุกครั้ง การทำการทดสอบที่ไม่ซ้ำซ้อนกันพร้อมกันในส่วนต่างๆ ของเว็บไซต์ การวิเคราะห์และรายงานผลโดยอัตโนมัติ เพื่อให้ได้ผลลัพธ์ในวันที่การทดสอบเสร็จสิ้น แทนที่จะรอสองสัปดาห์ ทั้งหมดนี้ไม่ได้ลดทอนความเข้มงวด แต่ช่วยลดระยะเวลาที่ใช้ระหว่างการทดลองแต่ละครั้ง
ควรพิจารณาความเร็วในการดำเนินงานควบคู่ไปกับมาตรวัดคุณภาพมากกว่าที่จะพิจารณาแยกต่างหาก ตัวชี้วัดที่ควรพิจารณาควบคู่กันไป ได้แก่ สัดส่วนของการทดสอบที่ได้ข้อสรุปที่ถูกต้องแทนที่จะถูกยกเลิก สัดส่วนของการทดสอบที่ก่อให้เกิดการเรียนรู้ที่บันทึกไว้ได้โดยไม่คำนึงถึงผลลัพธ์ สัดส่วนของการทดลองที่เกี่ยวข้องกับหน้าเว็บหรือขั้นตอนที่มีคุณค่าสูง และผลกระทบสะสมที่วัดได้ของโปรแกรมผ่านการทดสอบแบบแยกกลุ่ม แดชบอร์ดที่แสดงความเร็วในการดำเนินงานเพียงอย่างเดียว จะได้รับการปรับปรุงให้เหมาะสมที่สุดโดยการทำการทดสอบที่ไม่สำคัญมากขึ้นอย่างแน่นอน
การทดสอบพร้อมกัน (Concurrency) สมควรได้รับความสนใจเป็นพิเศษ เพราะเป็นกลไกที่มักถูกนำไปใช้อย่างไม่ระมัดระวังมากที่สุด การทำการทดลองหลายอย่างพร้อมกันจะเพิ่มปริมาณงานเมื่อการทดสอบเหล่านั้นส่งผลกระทบต่อส่วนที่ไม่เกี่ยวข้องกันของประสบการณ์ และจะสร้างผลลัพธ์ที่ตีความไม่ได้เมื่อการทดสอบเหล่านั้นทับซ้อนกัน กฎที่ใช้ได้จริงคือ การกำหนดการทดสอบแต่ละครั้งให้สอดคล้องกับขั้นตอนและกลุ่มเป้าหมายที่เกี่ยวข้อง หลีกเลี่ยงการทดสอบสองครั้งที่แก้ไขขั้นตอนเดียวกันพร้อมกัน และตรวจสอบผลกระทบจากการทำงานร่วมกันเมื่อการทดสอบอยู่ติดกัน แทนที่จะสันนิษฐานว่าเป็นการทดสอบที่เป็นอิสระต่อกัน บางองค์กรแก้ปัญหานี้โดยการรักษาปฏิทินร่วมกันของการทดลองที่กำลังดำเนินการอยู่ โดยบันทึกพื้นที่ที่ได้รับผลกระทบ ซึ่งอาจดูไม่สวยงามนัก แต่ช่วยป้องกันสถานการณ์ทั่วไปที่สองทีมทดสอบการเปลี่ยนแปลงที่ขัดแย้งกันในหน้าเดียวกันโดยไม่รู้ตัว และทั้งสองทีมรายงานผลลัพธ์ที่ไม่ชัดเจนโดยไม่เข้าใจสาเหตุ
สำหรับองค์กรส่วนใหญ่ เส้นทางที่เร็วที่สุดในการเพิ่มความเร็วในการทำงานไม่ใช่เครื่องมือใหม่ แต่เป็นการสร้างแบบจำลองการดำเนินงานที่ชัดเจนยิ่งขึ้น เช่น ใครเป็นผู้คิดไอเดีย ใครเป็นผู้จัดลำดับความสำคัญ ใครเป็นผู้สร้าง ใครเป็นผู้อนุมัติ และแต่ละขั้นตอนใช้เวลานานเท่าใด การสร้างแบบจำลองดังกล่าวเป็นส่วนหนึ่งของกระบวนการปกติขององค์กร การจัดการการเจริญเติบโต การมีส่วนร่วม และจังหวะที่เกิดขึ้นนั้นมักขึ้นอยู่กับการมีสมมติฐานที่เตรียมไว้เป็นอย่างดีและมีหลักฐานสนับสนุนเพียงพอ เพื่อให้กระบวนการทำงานเต็มอยู่เสมอ ซึ่งเป็นจุดที่ความต่อเนื่องมีความสำคัญ การวิจัยผู้ใช้ จึงสมควรที่จะเป็นส่วนหนึ่งของแผนงานการทดสอบ มากกว่าที่จะเป็นโครงการแยกต่างหากที่ทำเป็นครั้งคราว