Инструменты для тестирования: Лучшие приложения для A/B-тестирования

Создание успешного веб-сайта — сложная задача: не существует универсального руководства по привлечению посетителей сайта и генерированию трафика. Единственный совет, к которому стоит прислушаться, заключается в том, что сосредоточение на потребностях пользователей имеет первостепенное значение и всегда должно быть вашим главным приоритетом. Независимо от того, на чем вы сосредоточены — на навигации сайта, на публикуемом контенте или на маркетинговых усилиях — оценка влияния изменений на сайте на общую удовлетворенность пользователей приведет к повышению шансов на достижение желаемого результата.

Когда дело доходит до разработки удобных для пользователей элементов и кампаний, к счастью, вы не предоставлены сами себе: существуют полезные технические инструменты тестирования сайта, которые значительно облегчают оптимизацию сайта. Вы можете использовать A/B-тестирование (также известное как «сплит-тестирование»), чтобы специально проверить влияние двух разных веб-дизайнов на ваш сайт, а не просто угадывать, как будут выглядеть изменения. При A/B-тестировании вашей тестовой аудитории будут представлены различные версии, чтобы выяснить их реакцию. Порядок настройки и оценки этих тестов полностью зависит от того, какие инструменты A/B-тестирования вы используете.

Что отличает инструменты A/B-тестирования друг от друга?

Операторы веб-сайтов все чаще используют возможность измерить, насколько успешны различные версии их страниц, рекламы и т.д.. Они делают это для того, чтобы оценить, какая из них будет наиболее подходящей для их сайта. Сплит-тесты особенно популярны в рекламном секторе и в электронной коммерции. Неудивительно, что рынок предлагает огромный выбор инструментов для тестирования, которые обеспечивают различные функции и ценовые модели, начиная от простых приложений для малого бизнеса до сложных корпоративных решений с комплексным обслуживанием для сайтов с большим трафиком.

Отдельные инструменты тестирования различаются не только по объему тестирования (количество пользователей, продолжительность тестирования и т.д.), но и по своим дополнительным функциям. Среди прочего, инструменты тестирования веб-сайтов можно отличить по следующим техническим характеристикам:

  • возможность/невозможность создания нескольких учетных записей
  • Возможность/невозможность одновременного входа в систему
  • Индивидуальный анализ пользователей (таргетинг) возможно/не возможно
  • Визуализация тестовых данных
  • Возможность экспорта данных тестирования
  • Уведомления по электронной почте
  • Множество интерфейсов (CMS, аналитическое программное обеспечение, магазинные системы)
  • Возможность указать несколько целей конверсии
  • Опции планирования для A/B тестирования
  • Тепловая карта / карта кликов
  • Архивирование данных тестирования

Краткое руководство по инструментам A/B-тестирования для веб-сайтов

Решение за или против того или иного инструмента тестирования веб-сайта часто сводится к цене — особенно когда некоторые инструменты могут обойтись вам в четырехзначную сумму для корпоративного сектора. Однако навыки и опыт компании также должны играть роль в процессе выбора. Если вы не знаете, как лучше использовать инструменты A/B-тестирования для своего собственного веб-проекта или как оценить данные тестирования, то инструмент будет мало полезен вам без посторонней помощи. Возможно, вам также стоит нанять внешнее агентство для контроля за тестированием, а не постоянно пользоваться довольно дорогими услугами поставщиков инструментов.

Если вы решили выбрать программу, следующий обзор поможет вам сделать свой выбор. В течение этой статьи мы представим вам несколько интересных программ для оптимизации сайта на основе A/B-тестов.

Adobe Target

С 2012 года Adobe объединяет несколько продуктов для онлайн-маркетинга и веб-аналитики в рамках Adobe Marketing Cloud. В число этих инструментов входит Adobe Target — инструмент для проведения A/B-тестирования, который можно приобрести по желанию в общем маркетинговом пакете или отдельно. Стоимость программы рассчитывается индивидуально, исходя из годового количества посетителей соответствующего веб-сайта. Как оператор веб-сайта, вы должны быть в состоянии предоставить реалистичную оценку в начале контрактного периода, которая затем послужит отправной точкой для расчета цены. Для более детального тестирования и анализа на основе всех соответствующих параметров и целевых групп стоит объединить его с Adobe Analytics.

Adobe Target предназначен как для новичков, так и для профессионалов в области A/B-тестирования. Инструмент предлагает несколько лучших практик, которые можно использовать в качестве основы для собственных тестов, а также настраивать и дорабатывать их. Таргетинг также играет важную роль: программа используется для создания целевых групп и определения желаемых вариантов для отдельных строк кода или целых веб-сайтов. Пошаговые инструкции проводят пользователя через процесс настройки, который может быть непростым, особенно при первом использовании. Инструмент тестирования позволяет проводить одновременное тестирование нескольких страниц или каналов, а также имеет функции автоматической публикации оптимизированного контента в режиме реального времени. Другие функции включают:

  • Автоматизированная оптимизация на основе определенного набора правил мерчандайзинга (ключевые цифры, пороговые значения KPI).
  • Возможность проведения целевых рекламных акций (рекламные баннеры или видеоролики)
  • Возможность интеграции функций анализа через Adobe Analytics
  • Опции оптимизации мобильного контента
  • Создание автоматизированных рекомендаций.

Интерфейс Adobe Targets является настраиваемым. Маркетолог может выбирать, как будут отображаться различные отчеты, диаграммы и ежедневные сводки. Чем больше данных получает программа, тем меньше вам придется беспокоиться о специфике проведения A/B-тестов. Adobe Target не только получает доступ к настройкам пользователей, но и предоставляет свои собственные данные для оптимизации кампаний благодаря мощным алгоритмам. Например, механизм таргетинга автоматически оценивает все данные тестов, получая информацию, которая помогает совершенствовать процесс группировки кандидатов на тестирование в долгосрочной перспективе.

Pro Против
Возможно мобильное тестирование/оптимизация Ценообразование только по запросу
Возможность самостоятельного хостинга Трудоемкая, требующая много времени установка

AB Tasty

В июне 2012 года агентство веб-аналитики AB Tasty (ранее Liwio) опубликовало первую версию своего одноименного программного обеспечения, которое помогает клиентам быстро и удобно разрабатывать собственные процессы оптимизации. С тех пор их инструмент A/B-тестирования постоянно развивается и расширяется на шести сайтах компании. Заинтересованным лицам предлагаются три пакета подписки: «Starter», «Plus» и «Enterprise». Пакет «Starter» ($249 в месяц) и пакет «Plus» ($399 в месяц) отличаются только количеством зарегистрированных посетителей (50 000 и 100 000 соответственно). Редакция «Enterprise» (цена по запросу) не содержит ограничений по трафику и предлагает премиум-поддержку, а также различные дополнительные функции.

AB Tasty показывает себя как очень понятный и удобный инструмент A/B тестирования. Он быстро и легко настраивается, персонализируется и управляется в разделе «Тесты». Каждому проекту анализа присваивается уникальный идентификационный код теста, и его можно запустить, приостановить или остановить в любое время. Кроме того, пользователь может в любой момент изменить настройки или вызвать любой необходимый отчет, а затем экспортировать его в файл PDF или Excel. Тестируете ли вы настольный сайт, мобильную версию или нативное приложение (возможно только с пакетом Enterprise): модификации и настройки целевой группы могут быть изменены во всех версиях сайта всего за один шаг. Пользователи AB Tasty также могут воспользоваться следующими возможностями:

  • Возможность совершения неограниченного количества конверсий
  • Инновационный алгоритм «Умная» статистика
  • Неограниченное количество учетных записей пользователей
  • Легкая интеграция сторонних приложений (веб-аналитика, CRM и CMP системы).

Возможностей моделей «Starter» и «Plus» более чем достаточно для обычного A/B тестирования небольших и средних сайтов. Однако если вы хотите улучшить пользовательский опыт веб-сайтов или приложений, имеющих большой объем трафика, вам следует выбрать AB Tasty Enterprise. Подписчики Enterprise могут тестировать изменения в мобильных приложениях, а также создавать многомерные и многоступенчатые тесты. Кроме того, вы можете создавать тепловые карты и управлять доступностью отдельных тестов. В плане таргетинга Enterprise Edition намного опережает две стандартные модели, имея более 100 собственных критериев, что позволяет проводить еще более целенаправленные кампании.

Pro Contra
Пользовательский интерфейс Учебные материалы включены только в пакет Enterprise
Выдающаяся поддержка  

Optimizely X Web Experimentation

С 2019 года компания Optimizely, расположенная в Сан-Франциско, предлагает «X Web Experimentation» в своем собственном инструменте тестирования для проведения масштабных A/B-тестов. С 2007 года агентство производительности поддерживает операторов веб-сайтов, разработчиков, маркетологов и менеджеров проектов в оптимизации веб-сайтов на основе собранных данных тестирования — теперь также работает в филиалах по всему миру, таких как Мюнхен, Лондон, Париж или Сидней.

Optimizely продает свое программное обеспечение в трех вариантах: в то время как «стандартный» пакет включает все инструменты A/B тестирования, «профессиональный» пакет добавляет к этим базовым компонентам дополнительные функции, такие как расширенный таргетинг аудитории или пользовательские роли и авторизации. В дополнение к стандартной и профессиональной редакциям, пакет «премиум» включает дополнительные функции, такие как гео-таргетинг, и позволяет использовать неограниченное количество пользователей. Стоимость соответствующего пакета (цены предоставляются по запросу) зависит от количества посетителей сайта, при этом минимальный предел составляет 1 000 человек.

Optimizely должен быть достаточно интуитивно понятным в работе для большинства пользователей благодаря привлекательному веб-интерфейсу. В разделе «Эксперименты» вы можете создать свой тестовый проект всего за несколько шагов: после выбора названия кампании, количества тестовых страниц и целевых групп можно сформулировать любое количество целей конверсии. В Optimizely они называются «метриками». Наконец, вы можете распределить входящий трафик в процентном соотношении между многочисленными вариантами. Целевые группы создаются в отдельном меню «Аудитории». Там пользователь назначает аудитории следующие параметры с помощью функции перетаскивания:

  • Параметры версии браузера
  • Cookies разрешены / не разрешены
  • JavaScript разрешен / не разрешен
  • Параметры операционной системы
  • Источник посетителей (прямой доступ, поисковая система, ссылка, реклама).

Инструмент A/B-тестирования позволяет не только улучшить опыт пользователей настольных компьютеров: поскольку мобильные сайты и приложения для iOS или Android также могут быть протестированы, вы можете узнать о поведении пользователей и уровне удовлетворенности, которые приносят портативные устройства. Отдельные тесты можно запускать, приостанавливать и корректировать по мере необходимости. Те, кто использует функцию расписания, могут даже определить, когда какие процессы должны работать, и им не придется активировать их вручную.

На более поздних этапах анализа внедренный Stats Engine помогает в процессе принятия решений. Эта статистическая система использует метод последовательного тестирования для поиска оптимального варианта с вероятностью около 95 процентов.

Pro Contra
Редактор целевых групп с функцией drag-and-drop Отсутствие вариантов на иностранных языках
Высокий процент успеха благодаря собственной статистической системе (Stats Engine) Цена предоставляется только по запросу

Visual Website Optimizer

Visual Website Optimizer (известный как VWO) — один из первых инструментов тестирования сайтов. В 2010 году индийская команда разработчиков Wingify выпустила свое программное обеспечение, с помощью которого уже проведено более 300 000 веб-кампаний. Приложение ориентировано как на самозанятых и малые и средние предприятия, так и на крупные корпорации. Это отражено в трех планах подписки: планы «Стартап» (около $49/месяц за 10 000 посетителей) и «Бизнес» ($129/месяц за 30 000 посетителей) содержат все функции, которые могут понадобиться блоггерам, агентствам или небольшим компаниям. Крупные компании могут подписаться на тарифный план «Enterprise» (от $999 в месяц за любое количество посетителей) и получить полезные дополнительные функции, такие как геотаргетинг или доступ к API.

Инструменты анализа, такие как тепловые карты, опросы и трекеры отзывов, имеют собственное меню, а также редакторы для создания тестов и определения целевых групп. Инструмент тестирования сайта не ограничивается A/B-тестированием, он также позволяет проводить многомерное и сплит-тестирование URL. Вы также можете инициировать простое отслеживание конверсии на сайте. При настройке проверки опыта пользователь также может определить любое количество целей конверсии. Другие возможности инструмента включают:

  • WYSIWYG-редактор для создания разнообразного контента
  • Доступ к лучшим практикам (IdeaFactory, Landing Page Analyzer, Case Study Library)
  • Высочайшая производительность благодаря соединению с собственной сетью доставки контента (CDN)
  • Интегрированные интерфейсы для различных стандартных программ (CMS, Webanalyse-Tools, Warenkörbe и т.д.)
  • Самостоятельный хостинг (только в случае корпоративного плана)
  • Доступ к API (только для Enterprise-Plan)

Тесты можно запускать, приостанавливать или останавливать в любое время. Также можно вносить изменения в настройки, например, если вы хотите добавить цель конверсии или настроить целевую группу. На выбор предлагается более 15 характеристик состава группы. Это такие вещи, как используемые ключевые слова, параметры запроса, дни недели или операционная система. Корпоративным клиентам доступны расширенные функции безопасности, более подробные отчеты, круглосуточная служба поддержки (включая персонального менеджера), а также возможность размещения самого инструмента тестирования.

Pro Против
Высочайшая производительность благодаря CDN-соединению Поддержка программного обеспечения доступна только на английском и японском языках
Возможность самостоятельного хостинга (Enterprise-план) Нет возможности тестирования мобильных приложений (только мобильные веб-сайты).

Convert Experiences

В 2011 году калифорнийская компания Convert Insights представила платформу A/B-тестирования для оптимизации сайтов. При поддержке компании Alta Ventures в том же году был открыт второй офис в Мексике, чтобы продолжить продвижение программного обеспечения. Convert Insights все больше ориентируется на корпоративный сектор и целевое тестирование, что отражено в последней версии инструмента, Convert Experiences. Пользователи могут выбирать между тремя платными версиями: «Plus» от ($449/месяц для до 400 000 посетителей), «Professional Team» (от $599 000 для до 1 000 000 посетителей) и «Enterprise» (от $6999 00/месяц для до 100 000 000 посетителей).

Тот факт, что Convert Experiments — это инструмент тестирования для профессионалов, быстро становится очевидным: хотя интерфейс ограничен наиболее важными элементами навигации, новички и неопытные маркетологи, скорее всего, будут ошеломлены обилием опций настройки и статистики. Веб-приложение слишком сложно для тех, кто хочет провести простые тесты, или для пользователей, не обладающих большим количеством ноу-хау в области A/B-тестирования. Эксперты выигрывают от подробных опций: помимо стандартных A/B-тестов, есть возможность проводить сплит URL, многомерные и A/A-тесты (сравнение оригинала с точной копией для проверки функциональности инструмента). Центральным элементом Convert Experiments, безусловно, является визуальный редактор, который помогает создавать любые желаемые варианты тестов с помощью всего нескольких щелчков мыши, без необходимости знания HTML. Если вы выберете нужные вам элементы исходной страницы, редактор захватит основной код и перечислит соответствующие опции для настройки во всплывающем меню, например, следующие:

  • Переместить объект
  • Изменить размер объекта
  • Скрыть элемент
  • Настроить код CSS/HTML
  • Вставить или заменить картинку
  • Редактировать текст
  • Изменить цвет фона

Первоклассный WYSIWYG-редактор инструмента тестирования сайтов убедителен благодаря выбору готовых конверсий целей («шаблонов целей»). Пользователь может легко получить доступ к этим шаблонам, если, например, он хочет определить ссылку или посетить определенную страницу в качестве конверсии. Кроме того, вы можете создавать собственные шаблоны в редакторе drag-and-drop или импортировать цели из Google Analytics. Между тем, Convert Expressions установил ряд критериев в качестве стандарта для составления целевых групп: разделение на новых и возвращающихся посетителей, а также классификация на основе местоположения (также социальные сети), выбранного стандартного языка или используемой поисковой системы. 

За Contra
Широкие возможности настройки для тестирования, таргетинга и целей конверсии Слишком сложно для новичков в A/B тестировании
Мощный WYSIWYG-редактор для создания вариантов  

etracker Optimizer

Инструмент etracker уже более десяти лет поддерживает своих клиентов в области оптимизации сайтов и онлайн-маркетинга. Успех компании, расположенной в Гамбурге, Германия, во многом обусловлен ее программным обеспечением для веб-анализа, которое несколько раз было отмечено как альтернатива Google Analytics, отвечающая требованиям защиты данных. С 2013 года компания также предоставляет собственный инструмент тестирования для проведения A/B и сплит-тестов URL с помощью etracker Optimizer. Клиенты могут выбрать одну из двух моделей подписки: версия «Pro» для самозанятых и малых и средних предприятий (19,00 евро в месяц), а также версия «Enterprise» (цена по запросу), которая также предоставляет функции ремаркетинга, а также многомерного тестирования (опционально).

etracker Optimizer обеспечивает пошаговое создание тестовых проектов. В начале пользователь выбирает желаемый тип теста и страницу, которую он хочет оптимизировать. На следующем этапе он настраивает исходную страницу в визуальном редакторе так, как это необходимо. Для этого достаточно нажать на нужный элемент, после чего во всплывающем меню отображаются соответствующие опции для редактирования JavaScript, CSS, HTML и текстовых элементов. Если вариант соответствует собственным идеям, пользователь может определить правила разделения посетителей — если вариант будет использоваться только на определенной целевой группе. Для этого инструмент тестирования предоставляет различные идентификационные признаки, которые можно комбинировать по своему усмотрению — например:

  • Строка в URL
  • Источник происхождения (социальные сети, поисковая система, реклама, ввод текста)
  • Использованные поисковые запросы
  • Различение между новыми и возвращающимися посетителями
  • Является ли посетитель подписчиком новостной рассылки или нет
  • Тип устройства
  • Местоположение

После создания варианта редактор предлагает задать время начала и окончания теста, а также определить процент посетителей, которые будут включены в тест. Вы также можете скорректировать оба параметра впоследствии — например, если хотите сделать паузу или преждевременно завершить тест. Последний шаг — определение целей конверсии. Здесь вы можете выбрать в качестве цели такие действия, как переход по ссылке, переход на определенную страницу или покупка продукта. Теперь инструмент A/B-тестирования отслеживает поведение посетителей сайта и определяет конверсию, как только одно из выбранных вами действий будет выполнено.

Pro Contra
Можно комбинировать с etracker Analytics Некоторые настройки целевой аудитории доступны только в редакции Enterprise
  Нет определенных функций сегментации

Сравнение инструментов тестирования с помощью сетки

Вышеупомянутые приложения имеют множество сильных и слабых сторон. Однако представить только один инструмент A/B-тестирования в качестве оптимального решения довольно сложно. Различные варианты также ориентированы на разные группы потребителей: в то время как Adobe Target и Convert Experiences специально предназначены для пользователей из корпоративного сектора, такие инструменты, как VWO или Optimizely X Web Experimentation, также подходят для маркетологов, которые только входят в мир A/B тестирования. 

Разработчик Год выпуска Язык Возможность самостоятельного хостинга    
AB Tasty AB Tasty 2012 английский, немецкий нет  
Adobe Target Adobe 2012 Английский да  
Convert Experiences Convert Insights 2011 Английский нет  
etracker Optimiser etracker 2013 Английский, немецкий нет  
Optimizely X Веб-экспериментирование Optimizely 2016 Английский нет  
Visual Website Optimizer (VWO) Wingify 2010 Английский да  

Оцените статью
cdelat.ru
Добавить комментарий