Нотификации

Нотификации

Если с автоматическими рассылками все не так просто, то с нотификациями еще сложнее! Эти письма у нас отправляются через CMS (в редких исключениях – через специализированный сервис, но тогда ситуация полегче). Таким образом, мы не знаем ни уровня доставки, ни просмотров, ни жалоб на спам. Чтобы узнать количество отправленных писем, нам, скорее всего, придется выуживать эту информацию из системы с помощью программиста.

Единственное, о чем мы можем судить достаточно точно, – это количество кликов и заказов. И то и другое нам доступно в сервисе веб-аналитики (благодаря utm-меткам, использованным при внедрении).

Стратегия первых трех месяцев работы с нотификациями – наблюдение. Мы просто набираем статистику, тем более нам есть чем заняться в это время: массовая и автоматические рассылки идут полным ходом.

После сбора данных переходим непосредственно к тестированию (рассмотрим только случай отправки писем через CMS – сервисы обычно дают больше статистики, и, если мы используем для отправки нотификаций специализированный сервис, то тестируем их по тому же принципу, что и автоответчики).

Отвечаем на вопрос: устраивает ли нас то, что мы видим, – количество кликов и заказов? Если нет, устанавливаем конкретные, достижимые цели и беремся за работу.

В качестве объекта для экспериментов выбираем один тип нотификаций – лучше тот, который отправляется чаще всего. Разрабатываем несколько вариантов для теста. Предмет тестирования нотификаций – это тема и содержание (в основном футер). Например, мы можем сделать иконки крупнее, поменять их цвет или состав. Речи о времени отправки не идет, поскольку письма рассылаются сразу после инициирующего события (регистрации, заказа, смены статуса).

Ставим задачу программисту внести изменения в нотификации. Ждем неделю или столько, сколько нужно для отправки не менее сотни писем. Измеряем результат: оцениваем количество кликов и заказов за этот период.

Важно: скорее всего, тестовый период длится меньше месяца, в то время как все предыдущие замеры нотификаций мы проводили раз в месяц. Поэтому пересчитываем средние показатели на количество дней, которое заняло тестирование. Если за месяц нотификация «новый заказ» собирает 400 кликов, то за неделю можно ожидать порядка 100.

Сравниваем пересчитанные показатели с нынешними результатами (не забываем учесть количество отправленных писем в том и другом случае).

Делаем вывод об эффективности нового варианта:

Если результаты неоднозначны, увеличиваем время тестирования (ждем большего объема отправленных писем).

Далее пробуем варианты В, Г и т. д. Конечно, работаем с ограниченным количеством версий, иначе тестирование затянется до бесконечности. По итогам выбираем самый действенный вариант, готовим задание и с помощью программиста внедряем наработки во все нотификации. Через месяц смотрим на общий результат. Если показатели выросли по сравнению с предыдущими значениями – тестирование прошло удачно.

Идеи об усовершенствовании нотификаций могут возникать постоянно, однако нужно уметь остановиться. Это не самый эффективный путь роста. Поэтому, повысив показатели хотя бы на несколько процентов, стоит этим удовлетвориться и отложить новое тестирование как минимум на пару месяцев.

Данный текст является ознакомительным фрагментом.