Aynı sayfanın farklı versiyonlarının performanslarının kıyaslamasına dayanan bir test yöntemidir. Versiyonlar bir hipotez ve hedef üzerine üretilir, sayfanın orijinal hali de dahil olmak üzere 2 veya daha fazla versiyon bulunması gerekir. Versiyonlar farklı kullanıcılara rastgele gösterilir, belirlenen hedef çerçevesinde gelen veriler istatistiksel olarak incelenerek hangi versiyonun kazandığına karar verilir. Versiyonlar üretilirken sayfadaki tek bir elementin yerleşimi veya tasarımı değiştirilebileceği gibi sayfa tamamen de ele alınabilir. Birden fazla değişken bulunduğunda Çok Değişkenli A/B Test (Multivariate Test) olarak adlandırılır.