การออกแบบที่ขับเคลื่อนด้วยข้อมูล คือการปฏิบัติในการกำหนดรูปแบบอินเทอร์เฟซ เนื้อหา และการตัดสินใจเกี่ยวกับการโต้ตอบ โดยใช้หลักฐานที่วัดได้เกี่ยวกับพฤติกรรมของผู้ใช้จริง แทนที่จะพึ่งพาความชอบส่วนตัว ความคิดเห็นภายใน หรือธรรมเนียมปฏิบัติในอุตสาหกรรมเป็นหลัก โดยอาศัยหลักฐานหลายแหล่งพร้อมกัน ได้แก่ การวิเคราะห์เชิงปริมาณ เช่น จำนวนการเข้าชมหน้าเว็บ เส้นทางการคลิก ความลึกของการเลื่อน และอัตราการแปลง; สัญญาณพฤติกรรมที่บันทึกผ่านฮีทแมปและการบันทึกเซสชัน; และข้อมูลเชิงคุณภาพที่รวบรวมจากการทดสอบการใช้งาน แบบสำรวจ และบันทึกการสนับสนุน เป้าหมายไม่ใช่การกำจัดดุลยพินิจของมนุษย์ออกจากกระบวนการ แต่เป็นการให้ดุลยพินิจนั้นมีพื้นฐานมาจากข้อเท็จจริง เพื่อให้การเลือกเกี่ยวกับเค้าโครง การนำทาง ข้อความ และลำดับชั้นทางภาพ สามารถเชื่อมโยงกลับไปยังความต้องการของผู้ใช้และผลลัพธ์ทางธุรกิจที่สังเกตได้ แทนที่จะเป็นสมมติฐานที่สืบทอดมาจากโครงการก่อนหน้าหรือเว็บไซต์ของคู่แข่ง
วิธีการนี้มีความสำคัญ เพราะการตัดสินใจออกแบบโดยปราศจากหลักฐานนั้นมีค่าใช้จ่ายสูง หากทำผิดพลาด การออกแบบหน้าแรกใหม่ การเปลี่ยนแปลงขั้นตอนการชำระเงิน หรือเค้าโครงหน้าแสดงราคาใหม่ อาจใช้เวลาหลายสัปดาห์ในการออกแบบและวิศวกรรม และหากอยู่บนพื้นฐานของสมมติฐานที่ยังไม่ได้รับการทดสอบ ก็อาจส่งผลกระทบต่ออัตราการแปลง (conversion rate) เป็นเวลาหลายเดือนก่อนที่ใครจะสังเกตเห็น เนื่องจากโดยปกติแล้วการออกแบบใหม่มักไม่มีสัญญาณเตือนที่บ่งบอกว่าประสิทธิภาพต่ำกว่าเวอร์ชันก่อนหน้า การออกแบบที่ขับเคลื่อนด้วยข้อมูลจะช่วยลดระยะเวลาการรับฟังความคิดเห็นนี้ลง โดยการตรวจสอบสมมติฐานตั้งแต่เนิ่นๆ มักจะผ่านต้นแบบที่มีความละเอียดต่ำ การทดสอบห้าวินาที หรือการทดลองแบบควบคุม ก่อนที่จะสร้างและเผยแพร่การเปลี่ยนแปลงไปยังผู้ใช้ทั้งหมด ทีมที่ใช้ระเบียบวินัยนี้มักจะแก้ไขข้อถกเถียงด้านการออกแบบภายในได้เร็วขึ้น เพราะคำถามจะเปลี่ยนจากความคิดเห็นของใครมีน้ำหนักมากกว่าในองค์กร ไปเป็นสิ่งที่หลักฐานซึ่งรวบรวมได้โดยตรงจากกลุ่มเป้าหมายที่การออกแบบนั้นมุ่งเน้นนั้นแสดงให้เห็นอย่างแท้จริง การเปลี่ยนแปลงนี้ยังเปลี่ยนวิธีการบันทึกข้อขัดแย้งด้วย เนื่องจากความคิดที่ถูกปฏิเสธซึ่งได้รับการสนับสนุนจากการทดสอบที่ล้มเหลว จะถูกจดจำแตกต่างจากความคิดที่ถูกล้มล้างโดยลำดับอาวุโสเพียงอย่างเดียว
ในทางปฏิบัติ กระบวนการออกแบบที่ขับเคลื่อนด้วยข้อมูลมักเริ่มต้นด้วยการกำหนดตัวชี้วัดเฉพาะที่การเปลี่ยนแปลงนั้นมีจุดประสงค์เพื่อสร้างผลกระทบ เช่น อัตราการเพิ่มสินค้าลงในตะกร้า อัตราการกรอกแบบฟอร์ม หรือเวลาในการดำเนินการที่มีความหมายครั้งแรก ก่อนที่จะเริ่มร่างโครงร่างเว็บไซต์เสียด้วยซ้ำ จากนั้นทีมงานจะติดตั้งเครื่องมือวิเคราะห์และพฤติกรรมในหน้าเว็บที่เกี่ยวข้อง ซึ่งโดยทั่วไปคือ Google Analytics 4, Hotjar หรือ Microsoft Clarity และปล่อยให้ปริมาณการเข้าชมจริงสะสมเป็นระยะเวลาที่มีความหมายทางสถิติ ซึ่งมักจะใช้เวลาสองถึงสี่สัปดาห์ขึ้นอยู่กับปริมาณ เพื่อสร้างฐานข้อมูลที่เชื่อถือได้ ผลลัพธ์จากช่วงเวลาฐานข้อมูลนี้จะถูกนำไปจัดลำดับความสำคัญของสมมติฐานการออกแบบ โดยจัดอันดับตามผลกระทบและความมั่นใจที่อาจเกิดขึ้น ซึ่งจะได้รับการทดสอบผ่านการทดลอง A/B หรือการทดลองแบบหลายตัวแปร ก่อนที่จะนำไปใช้ในวงกว้าง ปิดวงจรระหว่างการสังเกต สมมติฐาน การออกแบบ และผลลัพธ์ที่ได้รับการตรวจสอบแล้วในวงจรที่ทำซ้ำได้ แทนที่จะเป็นการออกแบบใหม่เพียงครั้งเดียว ทีมงานหลายทีมกำหนดวงจรนี้ให้เป็นรอบการทำงานแบบสปรินต์ที่เกิดขึ้นซ้ำๆ โดยตรวจสอบหลักฐานใหม่และจัดลำดับความสำคัญของรายการงานอีกครั้งทุกๆ สองถึงสี่สัปดาห์
ความเข้าใจผิดที่พบบ่อยคือ การออกแบบที่ขับเคลื่อนด้วยข้อมูลจะขจัดความคิดสร้างสรรค์หรือแทนที่การวิจัยผู้ใช้ด้วยตัวเลขดิบๆ ในความเป็นจริง ข้อมูลเชิงปริมาณจะบอกทีมว่าเกิดอะไรขึ้น เช่น อัตราการลดลง 40 เปอร์เซ็นต์ในช่องกรอกข้อมูลเฉพาะ ในขณะที่การวิจัยเชิงคุณภาพและความเชี่ยวชาญด้านการออกแบบจะอธิบายว่าทำไมจึงเกิดขึ้นและวิธีแก้ปัญหาที่ดีกว่าควรเป็นอย่างไร แต่เพียงอย่างใดอย่างหนึ่งก็ไม่เพียงพอที่จะสร้างผลลัพธ์ที่ดีได้ การพึ่งพาข้อมูลเชิงปริมาณมากเกินไปอาจทำให้ทีมติดอยู่ในวงจรของการปรับแต่งเล็กๆ น้อยๆ ที่ปลอดภัย ซึ่งบางครั้งเรียกว่าการเพิ่มประสิทธิภาพสูงสุดเฉพาะที่ (local-maximum optimization) โดยที่สีของปุ่มและข้อความหัวเรื่องจะถูกทดสอบซ้ำๆ ในขณะที่ปัญหาเชิงโครงสร้างที่ใหญ่กว่าในประสบการณ์การใช้งานกลับไม่ได้รับการแก้ไข เพราะยากที่จะแยกแยะได้ในการทดสอบเพียงครั้งเดียว การไล่ตามความสำคัญทางสถิติโดยไม่คำนึงถึงว่าการเพิ่มขึ้นนั้นมีความหมายในทางปฏิบัติสำหรับธุรกิจในระดับปริมาณการใช้งานและอัตรากำไรในปัจจุบันหรือไม่ เป็นอีกหนึ่งกับดักที่ทีมที่มีประสบการณ์เรียนรู้ที่จะป้องกัน เพราะผลลัพธ์ที่มีนัยสำคัญทางเทคนิคในตัวชี้วัดที่มีมูลค่าต่ำนั้นแทบจะไม่คุ้มค่ากับต้นทุนทางวิศวกรรมในการดำเนินการ
ในบริษัทที่ปรึกษาด้าน CRO หรือ UX การออกแบบที่ขับเคลื่อนด้วยข้อมูลเป็นรากฐานสำคัญของงานเกือบทุกโครงการ: การตรวจสอบจะเปรียบเทียบการตัดสินใจด้านการออกแบบในปัจจุบันกับหลักฐานเชิงพฤติกรรมก่อนเริ่มงานออกแบบใหม่ใดๆ สมมติฐานจะถูกจัดลำดับโดยใช้กรอบการทำงาน เช่น ICE หรือ PIE โดยพิจารณาจากผลกระทบที่อาจเกิดขึ้น ความมั่นใจ และความพยายาม และการเปลี่ยนแปลงที่เสนอทุกอย่างจะถูกกำหนดเป็นข้อความที่สามารถทดสอบได้ แทนที่จะเป็นเพียงความชอบด้านสไตล์ที่นำเสนอในมู้ดบอร์ด ระเบียบวินัยนี้เองที่ทำให้บริษัทที่ปรึกษาสามารถให้เหตุผลสนับสนุนคำแนะนำได้อย่างมั่นคงกว่าข้อโต้แย้งด้านสุนทรียศาสตร์ และยังช่วยให้ลูกค้ามีกระบวนการที่ทำซ้ำได้ พร้อมด้วยบทเรียนที่บันทึกไว้จากทั้งการทดสอบที่ประสบความสำเร็จและล้มเหลว ซึ่งพวกเขาสามารถนำไปใช้ภายในองค์กรได้ต่อไปอีกนานหลังจากที่โครงการหรือภารกิจนั้นๆ สิ้นสุดลง