Статьи

Как эволюция пользовательского мышления переписала результаты одного А/Б-теста

Как эволюция пользовательского мышления переписала результаты одного А/Б-теста

Аналитик Rookee Екатерина Хиндикайнен о необычных выводах из вполне обычного сплит-тестирования.

Проверка гипотез с использованием А/Б-тестов уже давно стала неотъемлемой частью работ по расширению конверсионной воронки в узких местах. В этой статье мы хотим рассказать о личном опыте тестирования одной и той же гипотезы три года назад и сейчас в сервисе.

Но сперва разберёмся в терминах, которыми оперируем в статье.

Конверсионная воронка — это последовательность совершённых на сайте пользовательских действий, ведущих к конечной цели. Например: Трафик → Регистрации → Оплаты. Детализация воронки индивидуальна и зависит от особенностей ресурса и рычагов влияния на конечную цель.

А/Б-тесты (A/B-, сплит-тесты) — мощный маркетинговый инструмент для повышения эффективности ресурса и расширения конверсионной воронки в узких местах. Суть тестирования заключается в сравнении контрольной и тестовой группы элементов: А-группа без изменений (контрольная), Б-группа с изменениями (тестовая).

Гипотеза для теста — предположение по изменению функций ресурса, которое, как предполагается изначально, благоприятно повлияет на целевые показатели (например, на конверсию в определённом участке воронки).

История одной гипотезы

В 2015 году наши специалисты проводили анализ конверсионной воронки. По результатам этого анализа приняли решение прорабатывать воронку сверху. В нашем случае «верхом» воронки, как и для большинства других ресурсов, является регистрация.

«При стабильном проценте конверсии оплат в абсолюте станет больше», — скажете вы. — «Поэтому нужно просто увеличить число зарегистрированных пользователей».

В большинстве случаев вы будете правы, но не всегда.

Есть группа людей, которая доходит до покупки самостоятельно (назовём её «интерфейсные активаты»). Но есть и значительное число пользователей, которым необходимо помочь определиться с выбором и принять решение о покупке. С ними нужно разговаривать, им нужно звонить по телефону и отвечать на их вопросы (назовём эту группу людей «активаты голосом»).

Кроме того, с точки зрения психологии покупателя, голосовое общение с зарегистрированными пользователями благоприятнее влияет на средний чек, а также на срок жизни клиента.

«Значит, нужно организовать работу таким образом, чтобы всех зарегистрировавшихся пользователей обзванивали».

Всё так, только одно но — для совершения звонка нужно запрашивать номер мобильного телефона при регистрации. Как показывает практика, чем больше полей у формы регистрации, тем ниже вероятность того, что посетитель дойдёт до конца.

Здесь мы, наконец, добрались до сути нашей гипотезы: обязательное указание мобильного телефона при регистрации не ухудшит конверсию из посетителей в зарегистрированных пользователей. При этом номер телефона для каждого пользователя позволит увеличить конверсию в оплаты за счёт прозвона.

Раньше поле «Номер телефона» не было обязательным для заполнения

Обратите внимание: гипотеза в итоге получилась не про расширение воронки по числу зарегистрировавшихся пользователей. Нас устраивало сохранение текущего процента конверсии из посетителей в регистрации. Указание номера телефона при регистрации способствовало бы увеличению «активатов голосом» — и в итоге привело бы к росту финансовых показателей в долгосрочной перспективе.

Результаты тестов в 2015 и 2018 годах

Как вы, вероятно, уже догадались, в 2015 году гипотеза провалилась. Конверсия из трафика в регистрации ухудшилась — и это с учётом сезонности! Замотивированные пользователи всё же регистрировались, но в сухом остатке было много фейковых номеров.

Подтверждение номера телефона мы запланировали на следующий этап развития гипотезы (если бы она сработала). Но следующего этапа не было — пришлось откатывать изменения и проверять другие гипотезы.

Прошло три года.

Мы решили снова проверить гипотезу на практике и в июне провели повторный тест.

Версия с необязательным указанием мобильного телефона

Версия с обязательным указанием мобильного телефона

По результатам конверсия из посетителей в регистрации осталась на прежнем уровне, но количество фейковых номеров резко сократилось. Сейчас их число составляет менее 5% от всех регистраций. И мы убеждены, что причиной этому послужила эволюция пользовательских привычек.

Психология пользователей изменилась: многие массовые сервисы и ресурсы в обязательном порядке просят указать номер телефона при регистрации. Люди привыкли получать подтверждение и пароли на свой мобильный телефон. Оставлять контакты стало обычным делом.

Вывод: проверив гипотезу единожды, не забывайте про неё навсегда. Если изменились обстоятельства и интуиция подсказывает вам, что пришло время проверить гипотезу ещё раз — действуйте. Возможно, именно сейчас она созрела и готова принести свои плоды.

Екатерина Хиндикайнен, Аналитик Rookee 

01.10.2018

на печать


Комментарии

Написать комментарий

 Проверочный код

Архив

Пн Вт Ср Чт Пт Сб Вс

Рассылка

Подписка на рассылку

E-mail:
 

Также нашу рассылку вы можете получать через

E-mail:  

Есть мнение ...

Как использовать потребительские тренды в туризме и маркетинге...Как использовать потребительские тренды в туризме и маркетинге...
Опрос Ipsos показал: путешествия важны для благополучия россиян, но туризму сложно конкурировать с другими статьями расходов. Выиграть в этой борьбе помогут учет потребительских трендов, ориентация на опыт путешественника и маркетинг впечатлений.
Почему в разгар гастрономического бума никто не хочет покупать...Почему в разгар гастрономического бума никто не хочет покупать...
Некогда главную марку русской кухни выставили на торги. От таких новостей возникает какая-то прямо-таки ностальгическая, светлая печаль. На московской площадке для торгов продадут два бренда группы «Елки-Палки» — «Елки-Палки экспресс» и «Елки-Палки трактир». Вы еще помните эти рестораны и точки общепита?
Городские власти запретят звуковую рекламу на улицахГородские власти запретят звуковую рекламу на улицах
Интересно, что добились этого муниципальные депутаты Тверского района.Некоторым очень везет. Их окна, которые так хочется держать открытыми этим теплым летом, выходят на людные улицы с множеством магазинов. А на этих улицах с утра до вечера — то есть все рабочее время — ходят люди с мегафонами, призывающие покупателей немедленно зайти и приобрести товар — как правило, недорогой и, как правило, поддельный. Ну или зайти выпить кофе. Или съесть гамбургер — все работающие и живущие на людных улицах несчастны по-разному и от разного.
Александр Оськин: "За газеты будем бороться"Александр Оськин: "За газеты будем бороться"
Назначена и дата «похорон» печатных СМИ — 29 декабря 2037 года. В неизбежности этого события уверены многие авторитетные медиаспецы. Многие, но не все. У вице-президента Союза предприятий печатной индустрии по распространению печатной продукции (СППИ ГИПП) Александра Оськина на этот счет иное мнение. Слухи о неминуемой и скорой смерти печатных СМИ он считает сильно преувеличенными.
"В Москве общий уровень дизайна улучшается, а хороший уровень..."В Москве общий уровень дизайна улучшается, а хороший уровень...
Как менялись московские вывески на протяжении последних трех десятилетий, чем московские вывески отличаются от европейских и почему дизайнеры наших вывесок, равно как и навигации в метро, не помогают горожанам сориентироваться. Об этом «Москвич Mag» рассказали владельцы дизайнерских студий, разработчики дизайн-кода Москвы, графические дизайнеры и участники фестиваля шрифтовиков Typomania. 

Книги по дизайну

Загрузка ...

Репортажи

В ЦДХ прошел День социальной рекламыВ ЦДХ прошел День социальной рекламы
28 марта в Центральном доме художника состоялась 25-ая выставка маркетинговых коммуникаций «Дизайн и реклама NEXT». Одним из самых ярких её событий стал День социальной рекламы, который организовала Ассоциация директоров по коммуникациям и корпоративным медиа России (АКМР) совместно с АНО «Лаборатория социальной рекламы» и оргкомитетом LIME.
Форум "Матрица рекламы": к рекламе в интернете особое...Форум "Матрица рекламы": к рекламе в интернете особое...
На VII Международном форуме «Матрица рекламы», прошедшем в ЦВК «Экспоцентр» в рамках международной выставки  «Реклама-2018», большой интерес у профессиональной аудитории вызвала VI Конференция «Интернет-реклама».
87% компаний используют три и более каналов для внутренних...87% компаний используют три и более каналов для внутренних...
«Лучшие кейсы по внутрикорпоративным коммуникациям. Ключевые тенденции последнего времени. Изменения стремительны, успеваем ли мы за ними?» - данную тему 25 апреля 2018 года обсудили на заседании  Комитета по внутрикорпоративным  коммуникациям Ассоциации менеджеров.
New media, new creativity! "Серебряный меркурий" расширяет...New media, new creativity! "Серебряный меркурий" расширяет...
21-22 марта в Санкт-Петербурге состоялся IV Фестиваль рекламы и маркетинговых услуг «Серебряный Меркурий. Северо-Запад», в рамках  которого прошла Большая конференция. Организатором мероприятия стало ведущее брендинговое агентство России – Brandson (Total Identity Group), во главе с Генеральным директоров агентства, Членом совета АБКР, Еленой Юферевой.
Выставка, посвящённая 100-летию со дня рождения Георгия ЩетининаВыставка, посвящённая 100-летию со дня рождения Георгия Щетинина (6)
В Государственном музее А. С. Пушкина открылась выставка, посвященная не столь широко известному, но заслуживающему пристального внимания художнику-иллюстратору ХХ века Георгию Щетинину.

Форум

Вакансии

  • Загрузка ...

на правах рекламы

22.10.2019 - 01:21
RSS-каналы Advertology.RuRSS    Читать Advertology.Ru на Facebookfacebook    Читать Advertology.Ru ВКонтактеВКонтакте    Читать Advertology.Ru на Twittertwitter   
Advertology.Ru - все о рекламе, маркетинге и PR

Вход | Регистрация