Задать вопрос
@kudz0
математика

Значимые ли результаты?

Коллеги, помогите разобраться, пожалуйста, в результатах А/Б тестирования сайта

Статистическая значимость 95%

Вариант А:
Выборка 15314 чел.
Конверсия 1,91% (293 чел.)
Доверительный интервал 1,70 - 2,13

Вариант Б:
Выборка 16191 чел
Конверсия 2,33% (378 чел)
Доверительный интервал 2,10 - 2,57

P-value 0.004%
Z-score 2.59%

Вопрос заключается в следующем:
Доверительные интервалы пересекаются на 0,03%
Являются ли результаты значимыми? Можно утверждать что вариант Б победил?
  • Вопрос задан
  • 589 просмотров
Комментировать
Подписаться 2 Оценить Комментировать
Помогут разобраться в теме Все курсы
  • Яндекс Практикум
    Математика для анализа данных
    6 месяцев
    Далее
  • Яндекс Практикум
    Основы математики для цифровых профессий
    2 месяца
    Далее
  • Нетология
    Data Scientist: расширенный курс
    13 месяцев
    Далее
Пригласить эксперта
Ответы на вопрос 2
opium
@opium
Просто люблю качественно работать
Такое ощущение что вы решаете задачник и совершенно не понимаете, что значат эти величины.
Вот простой пример как получить достоверный результат
liraltd.com/raschet-dlinyi-vyiborki-dlya-testirovaniya
Ответ написан
Комментировать
Комментировать
IonDen
@IonDen
JavaScript developer. IonDen.com
Имхо: drpete.co/split-test-calculator и всё.
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы
Вакансии с Хабр Карьеры
Стажер Аналитик
ПСБ цифровая лаборатория • Москва
от 30 000 до 60 000 ₽
Deep Learning Engineer (GigaChat Prod)
Сбер • Москва
от 350 000 ₽
Аналитик-разработчик (команда Intelligent Search)
Сбер • Москва
от 250 000 до 400 000 ₽
Ещё вакансии