Працює · 2026-11Заява постачальникаGrowth-процесиАналітика

Аналіз потужності та планування MDE

Ще до запуску тесту оцініть, скільки він має тривати, щоб виявити найменший ефект, який для вас важливий.

Інші назви (англ.): sample size calculation

Твердження і докази

ТвердженняЩе до запуску тесту оцініть, скільки він має тривати, щоб виявити найменший ефект, який для вас важливий.

Датованого прикладу поки немає. Вважайте цю тактику гіпотезою.

Що показують цифри

Жодна опублікована цифра для цієї тактики ще не пройшла дослівну перевірку, тож графіка немає.

Чому це працює

Схема, не дані
Оберітьметрику ймінімальнийефектОцініть трафікі тривалістьРеально:запускайтетестЗадовго:оберітьсміливішуставкуЖодних тестів,що не помітятьприросту
Оберіть метрику й мінімальнийефектОцініть трафік і тривалістьРеально:запускайте тестЗадовго:оберітьсміливішуставкуЖодних тестів, що не помітятьприросту

Трафік і розподіл визначають мінімальний виявний ефект (MDE). Планування вберігає від тестів, які ніколи не зможуть виявити реалістичний приріст.

Як запустити

  1. Оберіть метрику й мінімальний ефект, який варто виявити
  2. Оцініть кількість показів за історичним трафіком
  3. Розрахуйте тривалість і розподіл
  4. Вирішіть, чи тест здійсненний
  5. Якщо трафіку замало, робіть сміливіші ставки

Як можна запустити

Варіанти дизайну для тесту, а не обіцяний результат.

  1. Варіант AКалькулятор до запуску

    Зробіть розрахунок потужності частиною кожного плану тесту, спираючись на історичний трафік обраної метрики.

  2. Варіант BСміливі ставки при малому трафіку

    Коли мінімальний помітний ефект нереалістично великий, тестуйте сміливіші зміни замість дрібних правок.

  3. Варіант CЧутливіша метрика

    Оберіть метрику ближчу до зміни або зменште дисперсію, щоб помітити менші ефекти.

Датовані приклади

Датованого прикладу поки немає. Вважайте цю тактику гіпотезою.

Чи це ще працює?

Працюєстаном на 2026-11

Вбудовано в платформи; на сторінці Statsig зазначено, що оцінки за межами історичних даних є прогнозами. джерело

Ризики

  • Запланований MDE — це не прогнозований ефект
  • Продукти з малим трафіком не можуть тестувати дрібні зміни

Джерела

  1. docs.statsig.com · Statsig docs · без дати
    “The smallest change in the metric that the experiment can reliably detect.”
    ✓ цитату звірено дослівно зі сторінкою
  2. docs.statsig.com · Statsig docs · без дати
    “The target is a planning threshold, not a predicted effect.”
    ✓ цитату звірено дослівно зі сторінкою

Історія змін

  • 2026-11-20 — harvest v0.1 (ops-ai)