Значущість A/B тесту

Z-тест для двох конверсій: чи відмінність реальна

Дані тесту

Варіант A: візити

A: конверсії

Варіант B: візити

B: конверсії

Результат

p = 0.0283

Різниця статистично значуща

A: 5%
B: 6%
Перевага: B +20%
z / p: 2.19 / 0.0283

Двосторонній z-тест, p<0.05. Правила: не зупиняйте тест на «майже значущому»; мінімум ~1000 візитів і ~50 конверсій на варіант для надійних висновків.