Краткий ответ
Что такое обратимое решение?
Обратимость — это спектр, а не выключатель
Почти ничто не бывает идеально обратимым, и почти ничто не бывает окончательным. Лучше, чем вопрос «можно ли это отменить?», спросить: «сколько будет стоить отмена и сколько времени она займёт?». Важнее всего четыре вида затрат.
- Деньги: сборы, залоги, выплаты за уведомление, разница в цене при перепродаже и стоимость возврата к прежнему.
- Время: сколько занимает отмена и есть ли момент, после которого отменить уже нельзя.
- Доверие: насколько пострадает доверие других людей к вам или ваше к ним, если вы измените курс.
- Свобода выбора: какие другие варианты решение закрывает — например через эксклюзивность, длинный срок или публичное объявление.
Обратимость — тоже не то же самое, что низкие ставки. Решение может затрагивать большие деньги и всё же легко отменяться, как возвращаемый залог. Решение может касаться небольших денег и быть труднообратимым, как публичное заявление. Оценивайте ставки и обратимость отдельно.
Пауза перед рекомендацией
Три ответа могут изменить это решение.
- 01
Что станет труднее вернуть после этого решения: деньги, время, доверие, доступ или варианты?
- 02
Какое допущение несёт наибольшую нагрузку, но подкреплено меньше всего данных?
- 03
Какое меньшее действие проверит это допущение, не запуская полное обязательство?
Как честно ответить на три вопроса
1. Что станет труднее вернуть?
Пройдитесь по деньгам, времени, доверию, доступу и вариантам и запишите по одной строке для каждого. Отметьте, что можно вернуть полностью, частично или совсем нельзя. Строки со словами «совсем нельзя» — то место, куда должен целиться самый малый тест.
2. Какое допущение несёт наибольшую нагрузку, но подкреплено меньше всего данных?
Перечислите допущения, на которых держится решение, например «клиенты заплатят эту цену» или «я буду пользоваться этим каждую неделю». По каждому отметьте, насколько от него зависит решение и сколько у вас данных. Самое рискованное допущение — то, где зависимость высока, а данных мало. Проверьте сначала его, а не самое лёгкое.
3. Какое меньшее действие проверит это допущение?
Ищите версию решения, которая сохраняет знание и убирает большую часть обязательства: меньше людей, более короткий срок, меньшая сумма, более узкий охват или взятая напрокат вместо купленной вещь.
«Пока не знаю» — допустимый ответ на любой из трёх вопросов. Обычно он указывает, что должен выяснить тест.
Самый маленький обратимый тест
Превратите одно допущение в наблюдаемую пробу.
Запишите решение, назовите допущение, способное его перевернуть, выберите одну наблюдаемую метрику, задайте срок и определите условие, при котором проба прекращается.
- Метрика
- Полученные данные, стоимость теста, время до результата и оставшаяся неопределённость.
- Успех
- Результат достаточно ясно различает варианты, чтобы следующее обязательство было соразмерным.
- Остановка
- Остановитесь, если проба не различает варианты или незаметно создаёт такой же риск, как полное решение.
Лестница обязательств
К большинству решений можно подходить ступенями: каждая стоит чуть больше и учит чуть больше. Перестаньте подниматься, как только данные станут ясны.
- Разговор: спросите того, кто это делал, или того, кого решение затронет.
- Бумажный или смоделированный тест: бюджет, расписание или макет.
- Проба или демо: коротко воспользуйтесь настоящей версией, часто бесплатно или дёшево.
- Пилот: небольшая версия с ограниченным сроком, реальными ставками и выходом.
- Ограниченное обязательство: короткий договор, первый этап или меньший объём.
- Полное обязательство, принятое с данными на руках.
Устройство хорошего теста для решения
- Вопрос: единственное допущение, на которое ответит тест.
- Метрика: нечто наблюдаемое, лучше всего число или «да/нет», а не впечатление.
- Условие успеха: какой результат заставит вас продолжить, записанный до начала.
- Правило остановки: какой результат или какая стоимость прекращают тест досрочно.
- Срок и предел затрат: чтобы тест не разросся незаметно до самого решения.
- Правило решения: что вы сделаете при каждом исходе, чтобы результат нельзя было переистолковать задним числом.
Частые ошибки
- Тестировать, чтобы подтвердить уже принятое решение, а не чтобы узнать.
- Сделать тест таким малым, что он не различает варианты.
- Сделать его таким большим, что он перестаёт быть обратимым.
- Сдвигать условие успеха после того, как увидели результат.
- Измерять усилия вместо результата — например затраченные часы вместо достигнутых клиентов.
- Тестировать в нереалистичных условиях — только с дружелюбными пользователями или только в лучшую неделю.
Разбор примера
Что меняется после вопросов?
Команда спорит, покупать ли годовой контракт на платформу, потому что миграция может улучшить отчётность.
Самое слабое допущение — не качество продукта, а то, будут ли сотрудники последовательно использовать новый процесс.
Команда тридцать дней ведёт один процесс с пятью пользователями и измеряет принятие, прежде чем подписывать годовое соглашение.
Второй пример: повышение цен
Небольшой интернет-магазин хочет поднять цены на десять процентов из-за роста издержек. Вопросы показывают: весомое допущение — что постоянные клиенты не уйдут, а данных о чувствительности к цене у магазина нет. Вместо изменения всех цен владелец на две недели поднимает цену одного популярного товара, оставляет остальные без изменений и сравнивает конверсию и повторные заказы. Условие успеха и правило остановки записываются до запуска изменения.
Когда не стоит проводить тест
- Когда ситуация срочная или затрагивает безопасность, здоровье или юридические обязанности. Вместо этого получите подходящую профессиональную помощь.
- Когда тест стоил бы столько же, сколько само решение, или причинил бы такой же вред.
- Когда решение и так легко отменить. Просто решите и пересмотрите позже.
- Когда тест затронул бы других людей так, как они не согласились.
Частые вопросы
Что такое обратимое решение?
Выбор, который можно отменить или изменить при приемлемых затратах, за полезное время и без непропорционального ущерба. Обратимость — это спектр, и она отличается от размера ставок.
Обратимое решение — то же самое, что решение с низкими ставками?
Нет. Решение может затрагивать большие деньги и всё же легко отменяться, а небольшое — труднообратимо. Оценивайте ставки и обратимость отдельно.
Каким малым должен быть тест решения?
Достаточно малым, чтобы вы могли отказаться от него с небольшими затратами, и достаточно большим, чтобы дать настоящие данные о проверяемом допущении.
Как долго должен идти тест решения?
Достаточно, чтобы увидеть один полный цикл того, что вы измеряете. Дни — для цены или привычки, несколько недель — для процесса или нового распорядка.
Что делать, если результат неоднозначен?
Это тоже информация. Либо метрика была недостаточно чёткой, либо тест слишком мал. Сузьте метрику или ненадолго продлите тест и заранее решите, каким будет следующий шаг, чтобы результат нельзя было переистолковать.
Чем это отличается от пилота или A/B-теста?
Пилот или A/B-тест — способ проведения пробы. Этот метод определяет, что проба должна измерять, насколько малой она может быть и что вы сделаете при каждом результате.
Где заканчивается это руководство
Инструмент для размышления — не авторитет.
Источники и заметки о методе
- Письмо Amazon акционерам за 2016 год, раздел «High-Velocity Decision Making» (односторонние и двусторонние двери)
- Британское управление по конкуренции и рынкам (CMA): «Experiments at the CMA» — руководство по полевым и онлайн-экспериментам (2023)
- Harvard Business Review: «Performing a Project Premortem» (Gary Klein, 2007) — о «предварительном вскрытии» проекта
Эта страница применяет эти идеи через оригинальный подход Decide Smaller: три вопроса и обратимый тест.