Размер выборки для A/B-теста ⇐ Python

[Anonymous]

Я хочу проверить, увеличивает ли какая-либо функция конверсию.
Я хочу обнаружить увеличение на 5 %, и мой базовый показатель составляет 80 %. Однако мой код говорит, что мне нужен размер выборки 903 на группу. Существует ли другой метод расчета выборки, например, для непараметрических тестов, который подходит для выборки меньшего размера?
import statsmodels.stats.api as sms

# Proportions
p1 = 0.80
p2 = 0.85

# Calculate effect size using the proportions
effect_size = sms.proportion_effectsize(p1, p2)

# Desired power and significance level
power = 0.80
alpha = 0.05

# Calculate the required sample size per group
sample_size_per_group = sms.NormalIndPower().solve_power(effect_size, power=power,alpha=alpha, ratio=1)

print(f"Required sample size per group: {sample_size_per_group}")


Подробнее здесь: https://stackoverflow.com/questions/793 ... r-a-b-test