A/B-testing vereist randomisatie van gebruikerstoewijzing, voldoende steekproefgrootte (power-berekening) en looptijd voor statistisch significantie. Multivariate testing test simultaan meerdere elementen. Bandit-algoritmen alloceren automatisch meer verkeer naar winnende varianten. Implementatie via Optimizely, VWO of AB Tasty.
Booking.com voert meer dan 1.000 simultane A/B-testen uit. Zelfs minimale tekstverschillen op de CTA-knop kunnen bij het volume van Booking.com miljoenen euro's impact genereren. Continue experimentation is een fundamenteel concurrentievoordeel bij schaal.