Критерии остановки эксперимента: когда продолжать, ставить на паузу и откатывать изменение
Эксперимент опасно заканчивать по формуле «на графике уже всё видно». До запуска полезно определить не только целевую метрику, но и условия, при которых эксперимент продолжается, временно замораживается, прекращается или приводит к откату изменения. Иначе одна и та же динамика легко получает разные трактовки в зависимости от того, какой результат команда хочет увидеть.
Для инженерного эксперимента […]