Статьи

Как эволюция пользовательского мышления переписала результаты одного А/Б-теста

Как эволюция пользовательского мышления переписала результаты одного А/Б-теста

Аналитик Rookee Екатерина Хиндикайнен о необычных выводах из вполне обычного сплит-тестирования.

Проверка гипотез с использованием А/Б-тестов уже давно стала неотъемлемой частью работ по расширению конверсионной воронки в узких местах. В этой статье мы хотим рассказать о личном опыте тестирования одной и той же гипотезы три года назад и сейчас в сервисе.

Но сперва разберёмся в терминах, которыми оперируем в статье.

Конверсионная воронка — это последовательность совершённых на сайте пользовательских действий, ведущих к конечной цели. Например: Трафик → Регистрации → Оплаты. Детализация воронки индивидуальна и зависит от особенностей ресурса и рычагов влияния на конечную цель.

А/Б-тесты (A/B-, сплит-тесты) — мощный маркетинговый инструмент для повышения эффективности ресурса и расширения конверсионной воронки в узких местах. Суть тестирования заключается в сравнении контрольной и тестовой группы элементов: А-группа без изменений (контрольная), Б-группа с изменениями (тестовая).

Гипотеза для теста — предположение по изменению функций ресурса, которое, как предполагается изначально, благоприятно повлияет на целевые показатели (например, на конверсию в определённом участке воронки).

История одной гипотезы

В 2015 году наши специалисты проводили анализ конверсионной воронки. По результатам этого анализа приняли решение прорабатывать воронку сверху. В нашем случае «верхом» воронки, как и для большинства других ресурсов, является регистрация.

«При стабильном проценте конверсии оплат в абсолюте станет больше», — скажете вы. — «Поэтому нужно просто увеличить число зарегистрированных пользователей».

В большинстве случаев вы будете правы, но не всегда.

Есть группа людей, которая доходит до покупки самостоятельно (назовём её «интерфейсные активаты»). Но есть и значительное число пользователей, которым необходимо помочь определиться с выбором и принять решение о покупке. С ними нужно разговаривать, им нужно звонить по телефону и отвечать на их вопросы (назовём эту группу людей «активаты голосом»).

Кроме того, с точки зрения психологии покупателя, голосовое общение с зарегистрированными пользователями благоприятнее влияет на средний чек, а также на срок жизни клиента.

«Значит, нужно организовать работу таким образом, чтобы всех зарегистрировавшихся пользователей обзванивали».

Всё так, только одно но — для совершения звонка нужно запрашивать номер мобильного телефона при регистрации. Как показывает практика, чем больше полей у формы регистрации, тем ниже вероятность того, что посетитель дойдёт до конца.

Здесь мы, наконец, добрались до сути нашей гипотезы: обязательное указание мобильного телефона при регистрации не ухудшит конверсию из посетителей в зарегистрированных пользователей. При этом номер телефона для каждого пользователя позволит увеличить конверсию в оплаты за счёт прозвона.

Раньше поле «Номер телефона» не было обязательным для заполнения

Обратите внимание: гипотеза в итоге получилась не про расширение воронки по числу зарегистрировавшихся пользователей. Нас устраивало сохранение текущего процента конверсии из посетителей в регистрации. Указание номера телефона при регистрации способствовало бы увеличению «активатов голосом» — и в итоге привело бы к росту финансовых показателей в долгосрочной перспективе.

Результаты тестов в 2015 и 2018 годах

Как вы, вероятно, уже догадались, в 2015 году гипотеза провалилась. Конверсия из трафика в регистрации ухудшилась — и это с учётом сезонности! Замотивированные пользователи всё же регистрировались, но в сухом остатке было много фейковых номеров.

Подтверждение номера телефона мы запланировали на следующий этап развития гипотезы (если бы она сработала). Но следующего этапа не было — пришлось откатывать изменения и проверять другие гипотезы.

Прошло три года.

Мы решили снова проверить гипотезу на практике и в июне провели повторный тест.

Версия с необязательным указанием мобильного телефона

Версия с обязательным указанием мобильного телефона

По результатам конверсия из посетителей в регистрации осталась на прежнем уровне, но количество фейковых номеров резко сократилось. Сейчас их число составляет менее 5% от всех регистраций. И мы убеждены, что причиной этому послужила эволюция пользовательских привычек.

Психология пользователей изменилась: многие массовые сервисы и ресурсы в обязательном порядке просят указать номер телефона при регистрации. Люди привыкли получать подтверждение и пароли на свой мобильный телефон. Оставлять контакты стало обычным делом.

Вывод: проверив гипотезу единожды, не забывайте про неё навсегда. Если изменились обстоятельства и интуиция подсказывает вам, что пришло время проверить гипотезу ещё раз — действуйте. Возможно, именно сейчас она созрела и готова принести свои плоды.

Екатерина Хиндикайнен, Аналитик Rookee 

01.10.2018

на печать


Комментарии

Написать комментарий

 Проверочный код

Архив

Пн Вт Ср Чт Пт Сб Вс

Рассылка

Подписка на рассылку

E-mail:
 

Также нашу рассылку вы можете получать через

E-mail:  

на правах рекламы

Есть мнение ...

Роль PR - специалистов в формировании будущего AI (искусственного...Роль PR - специалистов в формировании будущего AI (искусственного...
Управляющий партнер LotUS Communications Татьяна Жигаленкова поделилась экспертным мнением о роли PR специалистов в формировании будущего искусственного интеллекта.
Профессия digital-мира - influence marketing manager Профессия digital-мира - influence marketing manager
Работа с блогерами требует определенных навыков и знаний. Как найти релевантного инфлюенсера под конкретные сегменты брендов и определенные задачи, что необходимо проверить перед стартом сотрудничества, как и на каких условиях с ним взаимодействовать, какие важные нюансы необходимо соблюсти в коммуникации/документации? На все эти вопросы знает ответы — инфлюенс-маркетинг менеджер. Кирилл Диденок, диджитал продюсер, основатель коммуникационного агентства DIDENOK TEAM, рассказал, что входит в обязанности инфлюенс-маркетинг менеджера, и как им стать.
Telegram - важный инструмент в арсенале PR-специалистовTelegram - важный инструмент в арсенале PR-специалистов
Владимир Ступников, Генеральный директор коммуникационного агентства АУРА в составе Газпром-Медиа Холдинга. Социальные медиа становятся все более важным инструментом в работе каждого PR-специалиста, и одной из относительно новых, но стремительно растущих платформ, является Telegram. Этот мессенджер, изначально позиционировавшийся как безопасный и приватный инструмент связи, приобретает все большую популярность и привлекает внимание маркетологов и PR-специалистов по всему миру.
PR-специалисты будущего: какие компетенции и требования профессии...PR-специалисты будущего: какие компетенции и требования профессии... (1)
Татьяна Жигаленкова, управляющий партнер LotUS Communications, рассказала какие компетенции, и требования PR-специалистов будут актуальны через 5 лет.
Маркетинг с AR и VR от HICLICKМаркетинг с AR и VR от HICLICK
В 2024 году маркетологи все чаще начинают использовать метавселенные. По сравнению с социальными сетями, вовлеченность пользователей в иммерсивных площадках гораздо больше. Одним из самых интересных для клиентов форматов являются АR и VR. Как технологии будущего применять в маркетинге уже сегодня, разобрали в агентстве высоких откликов HICLICK.

Книги по дизайну

Загрузка ...

Репортажи

Дизайн под грифом "секретно"Дизайн под грифом "секретно"
На чем раньше ездили первые лица страны? Эскизы, редкие фотографии и прототипы уникальных машин.
"Наша индустрия – самодостаточна": ГПМ Радио на конференции..."Наша индустрия – самодостаточна": ГПМ Радио на конференции...
Чего не хватает радио, чтобы увеличить свою долю на рекламном рынке? Аудиопиратство: угроза или возможности для отрасли? Каковы первые результаты общероссийской кампании по продвижению индустриального радиоплеера? Эти и другие вопросы были рассмотрены на конференции «Радио в глобальной медиаконкуренции», спикерами и участниками которой стали эксперты ГПМ Радио.
Форум "Матрица рекламы" о технологиях работы в период...Форум "Матрица рекламы" о технологиях работы в период...
Деловая программа 28-й международной специализированной выставки технологий и услуг для производителей и заказчиков рекламы «Реклама-2021» открылась десятым юбилейным форумом «Матрица рекламы». Его организовали КВК «Империя» и «Экспоцентр».
В ЦДХ прошел День социальной рекламыВ ЦДХ прошел День социальной рекламы (3)
28 марта в Центральном доме художника состоялась 25-ая выставка маркетинговых коммуникаций «Дизайн и реклама NEXT». Одним из самых ярких её событий стал День социальной рекламы, который организовала Ассоциация директоров по коммуникациям и корпоративным медиа России (АКМР) совместно с АНО «Лаборатория социальной рекламы» и оргкомитетом LIME.
Форум "Матрица рекламы": к рекламе в интернете особое...Форум "Матрица рекламы": к рекламе в интернете особое... (2)
На VII Международном форуме «Матрица рекламы», прошедшем в ЦВК «Экспоцентр» в рамках международной выставки  «Реклама-2018», большой интерес у профессиональной аудитории вызвала VI Конференция «Интернет-реклама».

Форум

на правах рекламы

14.06.2024 - 18:12
RSS-каналы Advertology.RuRSS    Читать Advertology.Ru ВКонтактеВКонтакте    Читать Advertology.Ru на Twittertwitter   
Advertology.Ru - все о рекламе, маркетинге и PR
реклама

Вход | Регистрация