Раннее тестирование снимает проблемы накопления рисков и последующей траты времени и денег на исправление ошибок. Если речь заходит о разработке интернет-магазина (или любого другого IT-продукта), то с самого начала работы команда должна относиться к его созданию как к тестированию гипотезы. Гипотезой в этом случае будет предположение «наше техническое задание соответствует глобальным задачам проекта». Необходимо понять, сможет ли задуманная функциональность интернет-магазина обеспечить его плановую доходность.
Если гипотеза не подтвердилась, значит, направление было выбрано не верно и нужно его сменить. Раннее тестирование даст вам достаточно информации для обнаружения скрытых недостатков и нереализованных преимуществ, которые помогут существенно увеличить эффективность готового продукта. Проводя подобные тесты, важно смотреть в перспективу, не зацикливаясь на ошибке, и не тратить на поиск «виноватых» энергию, полезную для развития продукта.
Три проблемы раннего тестирования
Проблематика тестирования гипотез лежит в трех сферах:
| Предвзятость правильности собственных идей |
Чаще всего в техническое задание попадает субъективный опыт представителя заказчика или агентства, что может негативно отразиться на эффективности технического задания (ТЗ).
Проблема в том, что нарушен системный подход в аналитике: не изучена целевая аудитория, не сформировано ценностное предложение для нее. Для проверки лучше сделать шаг назад и собрать данные относительно сегментов целевой аудитории:
какие потребности и проблемы не закрыты?
какое ценностное предложение может дать компания клиентам в этом случае?
Формировать ТЗ, а уж тем более, начинать разработку сайта будет намного разумнее именно после такой простейшей аналитики. Дальше — сложнее. Нужно найти пересечение ценностей аудитории с вашим предложением и снять барьеры на пути к покупке.
Во время реализации продукта (в нашем случае сайта) первоначальные предположения могут не дать запланированного результата, в этом случае важно опираться не на интуицию, а точные данные тестирования. Для объективной оценки результатов нужно обязательно иметь бизнес-план по среднесрочному и долгосрочному развитию проекта и KPI для оценки его эффективности.
Решением проблемы служат имеющиеся на рынке технологии изучения целевой аудитории и базовые принципы формирования бизнес-моделей и ценностных предложений.
| Психологические аспекты |
Когда тестирование показывает несостоятельность первоначальных гипотез, тяжело принять результат и отказаться от части функционала или перейти к значимой его переделке.
Эта проблема носит чисто психологический характер. Исполнитель убежден в правильности собственных предположений, отрицательный результат разрушает его картину мира и представление о себе как о специалисте (особенно если у него мало опыта). У заказчика (или инвестора), со своей стороны, уже сформированы определенные ожидания, и откат изменений воспринимается как провал.
Договоренности о раннем тестировании помогают снять подобные проблемы еще до начала работ. Заказчик получает обоснованные риски, а исполнитель закладывает право на ошибку. Дать однозначную оценку результатам позволяет План Измерений, который содержит в себе главные KPI и бизнес-цели.
| Порядок тестирования |
Что и когда тестировать? Насколько сильно нужно дробить функционал для этого тестирования? Включать ли в него незначительные изменения или нет?
Для решения этой проблемы рекомендую сделать табличку с функционалом и проранжировать каждый пункт по критичности, а в другую колонку вписать стоимость изменения. Затем поделить эти два показателя и распределить финальный по убыванию. Таким образом, у вас получится список правок / гипотез в наиболее рациональном порядке:
| Гипотеза | KPI | Критич-ность [А] | Примерная стоимость [B] | Коэффициент (по убыв) [А/В] |
|---|---|---|---|---|
| Добавить «Сообщить о появлении товара» для товаров, которых нет в наличии | Заказ товара | 3 | 5000 | 0,0006 |
| Добавить фильтр по цветам | Заказ товара | 4 | 15000 | 0,0002 |
Новые идеи и рефлексия
В ходе проведения тестирования, вы сможете увидеть новые возможности для увеличения эффективности сайта, что позволит запустить фичи, которые на старте проекта были не видны или не очевидны.
Предыдущий опыт — очень ценный источник информации. Аудит маркетинговой активности в связке с бизнес-показателями сайта помогают понять природу успешных решений и ключевых ошибок. Возможность извлечь из опыта выводы позволяет взглянуть на проект глазами новых возможностей, а не набором проблем.
На стадии тестирования можно выявить недочеты первоначальных гипотез, но это не поможет сделать заведомо слабый проект прибыльным. По своей сути, сплит-тестирование — это тюнинг кузова, а не двигателя автомобиля. Отлаженный сервис (как отвечают на звонки, как консультируют, какие решения предлагают), качественные товары и гарантии, метрики доверия, удобство оплаты, сроки доставки и пр. — все это составляет «двигатель» компании, ключевые изменения в котором находятся в области клиента, а не агентства. Все эти факторы задают базовые показатели: ритм прироста брендового трафика (сарафанное радио), коэффициент конверсии в заказ, средний чек. Основные усилия агентства направлены на рост этих метрик, но изменения в разы можно сделать на 1 проекте из 30.
