С учетом теории вероятности - распределение в первом случае может быть не совсем 50/50.
Но тут Вам надо четко понимать 2 очень важные вещи:
1) При сплит-тестах, надо мерять не количество целевых действий, а конверсию в процентах.
Т.е к примеру случай A был показан 2000 раз, сделано 20 покупок, конверсия 1%.
случай B был показан 1000 раз, сделано 15 покупок, конверсия 1,5%.
Т.е случай B на 50% лучше случая A.
2) Любые сплит-тесты имеют смысл на большой выборке. Подробнее можно почитать в гугле или
liraltd.com/raschet-dlinyi-vyiborki-dlya-testirovaniya 
