Твердження і докази
all members of our departments run and analyse more than a thousand concurrent experimentsBooking.com · ar5iv.arxiv.org · 2017 · цитата мовою оригіналу
Першоджерело
Компанія чи засновник самі описують тактику і результат: власний блог, виступ, звітність.
Працює · 2026-11 Стаття 2017 року; поширену цифру в 25 000 тестів на рік тут не перевірено.
Що показують цифри
одночасних експериментів запускають і аналізують працівники різних відділів Booking.com (стаття компанії, 2017)
ar5iv.arxiv.orgЧому це працює
Широка залученість примножує кількість перевірених ідей. Запобіжники й моніторинг стану бізнесу та систем не дають цій свободі завдати шкоди.
Як запустити
- Створіть інструменти самообслуговування
- Додайте автоматичні перевірки стану й впливу
- Дозвольте будь-якому члену команди вести експеримент від початку до кінця
- Дайте кожному право зупиняти шкідливі тести
- Широко діліться результатами
Як можна запустити
Варіанти дизайну для тесту, а не обіцяний результат.
- Варіант AПлатформа самообслуговування
Дайте будь-кому в команді налаштувати, запустити й проаналізувати тест без центрального погодження, як у Booking.com.
- Варіант BАвтоматичні запобіжники
Стежте за бізнесовими й системними метриками в кожному тесті та сповіщайте або зупиняйте, коли вони погіршуються.
- Варіант CВідкрита стрічка результатів
Публікуйте кожен тест і його результат там, де вся компанія може їх читати й шукати.
Хронологія
- 12017 вперше описано: Kaufman, Pitchforth and Vermeer, Booking.com
- 22017 Booking.com — Працівники різних відділів запускають і аналізують експерименти на спільній платформі
- 32026-11 статус перевірено: Працює
Датовані приклади
- 2017
Booking.com
Працівники різних відділів запускають і аналізують експерименти на спільній платформі
“all members of our departments run and analyse more than a thousand concurrent experiments”
✓ цитату звірено дослівно зі сторінкоюar5iv.arxiv.org · 2017
Цитата мовою оригіналу.
Чи це ще працює?
Стаття 2017 року; поширену цифру в 25 000 тестів на рік тут не перевірено. джерело
Ризики
- Без запобіжників якість розмивається
- Потрібні значні інвестиції в розробку
Джерела
- ar5iv.arxiv.org
“Everyone in the company must be able and feel empowered to stop harmful experiments of their own accord.”
✓ цитату звірено дослівно зі сторінкою - ar5iv.arxiv.org
“running experiments is cheap, safe and easy enough that anyone can go ahead with testing new ideas”
✓ цитату звірено дослівно зі сторінкою
Історія змін
- 2026-11-20 — harvest v0.1 (ops-ai)