Alexander Gorny · 2026-01-22 · source ↗ · whole document (4)
Не тестируй это
Однако, сейчас, кажется, о них знают все и проблема противоположная. Люди отказываются принимать решения самостоятельно, всё проверяют, всё перекладывают на А/Б-тесты. Вчера мне в комментариях два раза предложили тестировать заведомо плохую обложку. И в корпоративной культуре это, наверное, правильно. За плохой релиз уволить могут, а за лишний тест – нет.
Но!
– Великое не протестируешь. Я уверен, что iPhone или ChatGPT без тестов запускались.
– Каждый тест стоит денег и времени. Есть прямые расходы на разработку, есть усложнение проекта (и других тестов), есть потери от того, что полезную функцию позже внедряем. Есть альтернативные издержки – вы могли бы что-то важное делать, а не проверять, что добавление сахара в рецепт сделает пирожок слаще.
– Полно случаев, когда правильный дизайн теста – годы. Мы столько ждать не можем и принимаем решение через месяцы на заведомо неверных данных. Уж лучше бы вообще без них.
Понятно, что “все есть яд, и все есть лекарство”, но А/Б-тесты крайне переоценены последнее время, мне кажется.
#простомысли