В связи с увеличивающейся нестабильностью работы с трафиком через webview-приложения, многие расторопные арбитраны, независимо от вертикали, уже не только тестируют, но и активно льют профитные связки, используя для этого PWA-прилы.
Арбитраж трафика с каждым годом все больше трансформируется в системный бизнес. Его эффективность теперь определяется не просто килограммами проданного «Титангеля» или ягод годжи, а множеством экономических метрик. Поэтому в вопросе оптимизации РК и повышения конверсии любой адекватный байер или команда не обходятся без A/B-тестов. И если, в случае с webview сплит-тесты обходятся недешево и занимают много времени, то с PWA сплит-тесты проводить гораздо проще, дешевле и быстрее. Ведь PWA, по сути, является гибридом лендинга и приложения, а трафик арбитражник льет на ссылку.
Основные этапы A/B-тестирования PWA
Каждая отдельно взятая связка может требовать множества локальных тестов, но приведем несколько обязательных этапов любого сплит-теста.
- Выбор элементов и переменных, которые планируется протестировать. На этом этапе важно не распылять усилия на одновременное измерение сразу нескольких параметров. Например, если проводится A/B-тестирование приложения с целью определить лучший вариант дизайна подложки и иконки, то нужно менять только дизайн подложки и иконки, а все остальные элементы оставить без изменений.
- Определение целей. В работе с PWA такими целями могут быть, например, увеличение количества установок, повышение CR(reg), уменьшение стоимости клика, повышение вовлеченности юзеров и др. Предварительное определение конкретных целей может упростить расстановку приоритетов и определение объема эксперимента.
- Создание гипотезы. Когда цели сплит-теста определены, составляется список идей и вариантов по A/B-тестированию и причин, объясняющих, почему тот или иной вариант прилы лучше первой версии. После составления этого списка расставляются приоритеты в соответствии с их влиянием на РК, ключевыми показателями эффективности приложения, сложностью реализации и т. д.
- Анализ уже имеющихся данных. На данном этапе можно использовать предварительные данные из трекера по схожим приложениям или запросить статистику оффера в партнерке. Именно с этими метриками нужно сравнивать результаты теста, если нет другой информации.
- Разработка вариантов. Теперь нужно создать модифицированную версию PWA-приложения в соответствии с гипотезой. Такой модификацией может быть простое изменение фона веб-приложения, добавление другой видео-презентации в карточку «приложения», нативных комментариев в «Play Market» и т. д.
- Выбор инструментов для A/B-тестирования. Для проведения полноценного теста PWA-прилы важно отслеживать основные показатели РК и качества проработки приложения. Традиционно в арбитраже трафика для этого используются сторонние трекеры. Собрав приложение в конструкторе PWA Group, сплит-тесты можно проводить, не покидая личный кабинет пользователя на сайте сервиса. Максимально подробная статистика по различным критериям взаимодействия ЦА с приложениями даст полное понимание того, какой вариант дает лучшую конверсию.
Здесь же можно получить детальный срез информации по взаимодействию с каждым push-уведомлением.
К сбору статики также можно подключить такие стандартные инструменты, как Google Analytics, Crazy Egg, Optimizely, VWO, MochingFish, Kissmetrics, Yandex.Metrika.
- Создание и запуск тестовых кампаний. Настроив основные параметры и обозначив срок тестирования, нужно пролить трафик на все версии PWA, общий элемент которых тестируется. При этом в некоторых сервисах можно указать геолокацию, тип устройства, операционную систему и другие критерии.
Важно! Создавать тестовые кампании, работая с небольшими рекламными бюджетами в большинстве случаев не имеет смысла, так как срез данных, вероятнее всего, будет некорректным.
- Сбор данных и их анализ. Этап сбора статистики можно назвать «режимом ожидания», в рамках которого не стоит делать поспешных выводов, резко сокращать бюджет на тест, останавливать РК и т.д. Все это приведет к получению поспешных и некорректных выводов. Важно дождаться окончания теста, и только после этого сравнить ключевые показатели результатов каждого варианта прилы, определив наиболее эффективный. Если гипотеза победила, можно приступить к ее внедрению и тестированию других изменений. Если же данные говорят об обратном, нужно разрабатывать другую гипотезу и начинать с самого начала.
Переменные PWA-приложений, актуальные для сплит-теста
Параметров для тестов PWA есть огромное множество. Главные из этого числа можно выделить на примере прилок сервиса PWA Group:
- Название приложения;
- Дизайн иконки и подложки;
- Наличие в карточке приложения видео;
- Видео со звуком или без;
- Плашка об отсутствии рекламы в приложении;
- Возрастное ограничение;
- Рейтинг приложения и размер APK-файла;
- Описание, оценки и соотношение отзывов (положительные, нейтральные и негативные);
- Наличие push-уведомлений в зависимости от действий/бездействия пользователя;
- Заголовки, картинки и тексты push-уведомлений и т.п.
Частые ошибки вебов при A/B-тестировании
Получению корректных данных сплит-теста мешают:
- Изменение и одновременное тестирование нескольких элементов;
- Использование чужих гипотез без учета особенностей ГЕО, оффера, дизайна, креатива, рекламной площадки и т.д.;
- Преждевременное завершение теста, на который обычно отводится минимум 3-4 дня;
- Игнорирование таких внешних факторов, как сезонность, ситуация в стране, локальные праздники и т.д;
- Запуск РК всего после 1-2 A/B-тестов;
- Игнорирование второстепенных показателей в метрике.
Вместо вывода
A/B-тестирование для PWA помогает аффилиатам получать актуальные данные о взаимодействии ЦА с приложением на основе практического опыта и определять наиболее профитные варианты, дающие высокую конверсию. Кроме того, в сплит-тесты в PWA позволяют анализировать не только все приложение целиком, но и его отдельные страницы и элементы. А при использовании конструктора с готовыми шаблонами, максимально похожими на страницы Play Market, и встроенным трекером с подробной статистикой по многим элементам, проведение таких тестов может сэкономить больше денег, времени, усилий и нервных клеток, что особенно актуально для арбитражника.
