Проводил ли A/B тестирование

Да, проводил A/B тестирование для оценки эффективности изменений в продукте. Например, сравнивал конверсию двух версий лендинга. Использовал Python (библиотеки scipy, statsmodels) для проверки статистической значимости разницы в метриках.

Пример кода:

from scipy import stats
import numpy as np

# Генерация данных (A - контроль, B - тест)
group_a = np.random.binomial(1, 0.1, size=1000)
group_b = np.random.binomial(1, 0.12, size=1000)

# Проверка разницы пропорций (t-test)
t_stat, p_value = stats.ttest_ind(group_a, group_b)
print(f"p-value: {p_value:.3f}")  # Если p-value < 0.05 - разница значима

Нюансы:

• Проверял мощность теста и размер выборки до запуска.
• Учитывал сегментацию пользователей (например, новые vs постоянные).
• Контролировал временные эффекты (например, выходные vs будни).