MVT целесообразно проводить в качестве дополнения к A/B/n, а не использовать как самостоятельный инструмент. В основном сплит-тесты проводят, чтобы реализовать глобальные изменения, а MVT — для оптимизации без глобального редизайна. Настройка занимает немало времени, но ещё больше времени может занять само тестирование. Как только тест достигнет минимального размера выборки, надо убрать самые неудачные варианты. В итоге больше трафика получат варианты, которые работают хорошо.
Результат зависит от времени суток, дня недели, сезонности и других факторов. Остановите тест, когда каждый вариант наберёт mvt тестирование нужное количество просмотров. Для обычного A/B тестирования трафик делится на 2 части, для A/B/n — на несколько равных.
Зачем проводить A/B/n тестирование
К примеру, 3х2 тест (другими словами, проверка 2 различных предположений трех элементов дизайна) потребует для того чтобы же трафика, как и сплит-тест на 9 вариаций. Можно протестировать любое количество версий и выбрать размер выборки для тестирования. Следует отметить, что кампанию с многомерным тестированием можно запустить без тестирования. В этом случает отправляется версия кампании по умолчанию. Сплит-тесты полезны, когда решается конкурирующий дизайн одной и той же страницы.
Значит, ваша аудитория не реагирует на изменение заголовка и изображения. Оставьте тот вариант, который радует ваш глаз и завершите тест. В этом виде тестов комбинируют разные небольшие доработки — и на каждый уникальный набор изменений направляют небольшую часть аудитории. В нем можно указать правила тестирования для специфичных сегментов пользователей и отображение персонализированного контента. Компаниям, которые ищут полноценный набор инструментов для A/B тестирования, а также платформам, нуждающимся в автоматизации маркетинговых процессов.
Когда НЕ стоит использовать TMS
Realroi.ru — простой русскоязычный сервис для сплит-тестирования. Гипотеза — прогноз роста продаж после определенных изменений, который основывается на изучении поведения клиентов и обратной связи. Если после проверки гипотезы растет выбранная метрика, гипотеза считается подтвержденной.
Но результат того стоит — решения по изменениям принимаются на основе данных, а не мнений маркетологов. Такой подход экономит время команды на поиски эффективного контента и снижает риски ошибок. MVT или мультивариантное тестирование проверяет эффективность сразу нескольких комбинаций разных элементов на страницах сайта и на других площадках. MVT тестирование покажет, какое сочетание даёт больше конверсий. Мы провели А/Б-тест — сравнили конверсию и средний чек нового и старого функционала.
Какие элементы можно тестировать?
Маркетологи спорят и том, какие изменения тестировать — небольшие или радикальные. A/B-test — самый популярный вид тестирования, при котором контрольная страница сравнивается со своей новой версией. Если изучается несколько версий страницы, то тест называется A/B/n-тестом. Для этих целей существует мультивариантное тестирование. Сплит-тесты нужны, в то время, когда решается соперничающий дизайн одной и той же страницы.
Суть метода заключается в том, чтобы разделить аудиторию на части и показать ей разные варианты чего-либо, чтобы понять, какая версия лучше. Одновременно с этим вы имеете возможность тестировать только выбранный комплект элементов. Мультивариантное тестирование требует времени, но оптимизация иногда не терпит стремительных и необоснованных ответов. Крис Говард из WiderFunnel согласится, что компания проводит один мультивариантный тест на 10 сплит-тестирований. Они смогут побудить вас на тестирование многих элементов легко вследствие того что вы имеете возможность это сделать. Но в случае с мультивариантным тестированием этот вопрос остается открытым.
Идеи, эффективность которых стоит обязательно проверить с помощью A/Б-тестирования
Придётся ждать, пока наберётся нужное количество просмотров. MVT test проверяет несколько разных вариантов переменных одновременно и их взаимодействие. Тест улучшает показатели без полного редизайна. Определят «слабые места» инструменты Google Analytics, вебвизоры и анализ обращений пользователей в техподдержку. Ищем, что работает неэффективно или вообще не приносит никаких результатов. A/B/n сравнивает больше двух вариантов, и трафик равномерно распределяется между каждой версией.
- Возможно, стоит сделать более решительные изменения, чтобы сместить баланс.
- Вы, конечно, сможете при помощи мультивариантного тестирования, терпения и здравого смысла создать эффективную продающую страницу.
- Платформа предлагает расширенные настройки для создания и корректировки экспериментов.
- Динамическое тестирование является частью процесса валидации программного обеспечения.
- В примере мы тестируем, на какую кнопку пользователи больше кликнут, поэтому выберем «С максимальным количеством переходов».
- Рассказать о результатах можно в виде презентации для команды.
Существует несколько инструментов, упрощающих работу исследователей. Статистически точный метод, но требует огромного трафика. Большом трафике на сайте, если проверяем эффективность его страниц. Тестируют такие же элементы, как в A/B/n тестах, но более детально и в комплексе с другими. Перед этим необходимо измерить исходные показатели конверсий и прочих метрик, которые будут учитываться.
Контроль над сплит-тестированием
Создание и проведение серии тренингов на тему разработки пользовательских интерфейсов и юзабилити для разработчиков компании. На наш взгляд сайты были не клиентоориентированные. Основная задача сайта – информировать зрителя о представлении, которое сейчас идет в цирке и купить билет. Зайдите в «Эксперименты», введите урл страниц, участвующих в тестах, и получите код для вставки. Даже если изначально определяется лидер, не нужно прерывать эксперимент.
Чем длиннее цикл покупки, тем более длительным должен быть тест. Если соблюдать правила, о которых мы расскажем ниже, то вы точно получите надежные результаты. Параметры многомерного теста определяются в диалоговом окне “Свойства”. Лучшая версия может быть выбрана автоматически или вручную.