Запущенный MVP ещё ничего не доказывает. Он даёт возможность собрать данные, но выводы появляются только тогда, когда вы заранее договорились, что считать успехом.
Проверка MVP состоит из трёх частей: критерий успеха, наблюдение за поведением и разговоры с пользователями. Каждая по отдельности вводит в заблуждение.
Критерий успеха определяют до запуска
Запишите одной строкой, что должно произойти, чтобы вы продолжили: например, «не меньше половины пришедших доходят до скачивания результата» или «пять из десяти опрошенных вернулись повторно». Порог можно пересмотреть, но только письменно и с объяснением. Иначе после запуска любое число легко объявить хорошим.
Поведение важнее мнений
Люди вежливо хвалят идеи, но голосуют временем, вниманием и деньгами. Смотрите, что они делают: дошли ли до результата, вернулись ли, что предпочли из возможного. Мнение полезно как объяснение поведения, но не как замена ему.
Простые метрики, которых достаточно
Доля людей, которые начали ключевой сценарий и довели его до результата. Доля вернувшихся через несколько дней. Источник, из которого пришли люди. Обращения в поддержку и повторяющиеся вопросы. Для первого MVP этого достаточно, а сложную аналитику можно подключить позже.
Разговоры и наблюдение
Поговорите с несколькими пользователями и, если можно, понаблюдайте, как они проходят сценарий. Спрашивайте не «нравится ли вам», а «расскажите, что вы делали в последний раз». Отмечайте места, где человек останавливается или ошибается: это самая ценная информация.
Типичные ловушки
Спрашивать только друзей и знакомых. Считать посещаемость успехом, если люди не доходят до результата. Игнорировать неудобные цифры. Менять критерий после запуска. Делать выводы по слишком малой выборке, когда одно обращение выглядит как тенденция.
Пример из практики
В QRPortal для бесплатной воронки заложили события основных действий, а данные собирает локальный трекер без cookie. Обратную связь принимают через простой опрос, для которого не нужна регистрация. Такой набор даёт и цифры, и живые слова пользователей без сложной аналитики.
Решение по результатам
Возможны три исхода: критерий выполнен и можно расширять продукт, критерий не выполнен, но причина понятна и её можно исправить, критерий не выполнен и причина в самой гипотезе. Во втором случае меняют сценарий или аудиторию и повторяют проверку. В третьем сознательно останавливаются или меняют направление.