Jaminan mutu adalah serangkaian praktik yang bertujuan untuk memastikan bahwa suatu produk memenuhi persyaratannya dan berfungsi dengan benar, meliputi proses, standar, dan aktivitas yang menghasilkan kualitas, bukan hanya aktivitas yang memeriksa ketiadaan kualitas. Perbedaan dari pengendalian mutu, yang merupakan inspeksi terhadap hasil akhir, lebih dari sekadar perbedaan terminologi: jaminan mutu berkaitan dengan pencegahan cacat, sedangkan pengendalian mutu berkaitan dengan pendeteksian cacat.
Pengaturan tradisional, di mana tim terpisah menguji pekerjaan yang telah selesai dalam fase yang berbeda sebelum dirilis, memiliki kelemahan yang terdokumentasi dengan baik. Cacat ditemukan jauh setelah muncul, ketika konteksnya telah dilupakan dan biaya perbaikannya paling tinggi. Jeda antara penulisan dan pengujian berarti pengembang tidak menerima umpan balik tepat waktu tentang pola kesalahan mereka sendiri. Dan tanggung jawab atas kualitas dialihkan ke kelompok yang tidak memiliki kendali atas bagaimana pekerjaan tersebut dihasilkan.
Praktik modern mendistribusikan tanggung jawab daripada memusatkannya. Pengembang menulis pengujian otomatis sebagai bagian dari proses pembuatan, tinjauan kode menangkap masalah sebelum mencapai lingkungan mana pun, integrasi berkelanjutan menjalankan verifikasi pada setiap perubahan, dan spesialis kualitas fokus pada strategi pengujian, pengujian eksplorasi, dan area yang tidak dapat dijangkau oleh otomatisasi. Peran spesialis menjadi salah satu yang memungkinkan dan merancang verifikasi daripada melakukan semuanya sendiri.
Piramida pengujian menggambarkan distribusi verifikasi otomatis yang masuk akal. Basis pengujian unit yang luas berjalan cepat dan menunjukkan kegagalan secara tepat. Lapisan yang lebih kecil berupa pengujian integrasi memverifikasi bahwa komponen bekerja bersama. Lapisan atas yang sempit berupa pengujian ujung-ke-ujung menjalankan seluruh rangkaian pengujian melalui sistem nyata. Membalikkan hal ini, dengan sangat bergantung pada pengujian ujung-ke-ujung yang lambat dan rapuh, menghasilkan rangkaian pengujian yang membutuhkan waktu berjam-jam untuk dijalankan, gagal secara tidak terduga, dan akhirnya diabaikan.
Pengujian eksploratif tetap penting dan sering kali diremehkan dalam organisasi yang berfokus pada otomatisasi. Tes otomatis memverifikasi bahwa perilaku yang ditentukan masih berfungsi; tes otomatis tidak dapat mendeteksi bahwa suatu alur membingungkan, bahwa pesan kesalahan tidak membantu, bahwa kombinasi yang tidak pernah dipertimbangkan menghasilkan hal yang tidak masuk akal, atau bahwa perubahan telah memperburuk sesuatu dengan cara yang tidak tercakup oleh pernyataan apa pun. Investigasi manual yang terampil menemukan kategori masalah yang tidak akan ditemukan oleh rangkaian pengujian apa pun.
Kewajiban kualitas jauh melampaui kebenaran fungsional. Aksesibilitas, kinerja dalam kondisi realistis, keamanan, perilaku pada perangkat dan koneksi yang benar-benar digunakan oleh audiens, dan kebenaran penanganan data semuanya merupakan atribut kualitas, dan organisasi yang hanya memverifikasi perilaku fungsional akan mengirimkan produk yang berfungsi dengan benar tetapi gagal memenuhi kebutuhan sebagian besar audiens mereka.
Manajemen data uji merupakan kendala yang kurang menarik namun menentukan seberapa banyak hal ini dapat dicapai dalam praktik. Data realistis diperlukan untuk menemukan cacat yang realistis, sementara data produksi seringkali tidak dapat digunakan secara langsung karena kewajiban privasi, dan data sintetis yang terlalu bersih justru menyembunyikan masalah yang layak ditemukan. Membangun pasokan data uji yang representatif dan sesuai biasanya merupakan prasyarat untuk verifikasi yang bermakna, bukan sekadar detail.
Argumen ekonomi untuk pencegahan sudah mapan. Biaya untuk memperbaiki cacat meningkat tajam seiring dengan seberapa terlambat cacat tersebut ditemukan, dari yang sepele jika terdeteksi selama pengembangan hingga yang substansial jika ditemukan dalam produksi, di mana hal itu juga membawa biaya operasional dan reputasi. Oleh karena itu, investasi dalam deteksi dini dibenarkan hanya berdasarkan pertimbangan biaya, terlepas dari argumen pengalaman pelanggan.
Karena kualitas ditentukan oleh bagaimana pekerjaan dihasilkan, bukan oleh apa yang terjadi pada akhirnya, praktik-praktik tersebut seharusnya dilakukan selama proses pengiriman, bukan setelahnya. Dalam praktiknya, hal ini ditetapkan di dalam pengembangan produk sebagai bagian dari definisi selesai, dengan kriteria aksesibilitas dan pengalaman yang diambil dari Audit UX standar dan ambang batas kinerja dari kinerja web anggaran, sehingga apa yang diverifikasi sesuai dengan apa yang sebenarnya dibutuhkan produk untuk disampaikan.