Глоссарий терминов «Экспериментирование» и «CRO»

Метод, предполагающий сравнение двух версий страницы или элемента для определения того, какая из них работает лучше.

Статистический подход, который обновляет вероятность того, что вариант окажется выигрышным, по мере поступления данных, а не в ожидании фиксированного порогового значения.

Функция, которая автоматически корректирует распределение трафика в сторону наиболее эффективного тестируемого варианта.

Алгоритм, который постепенно распределяет больше трафика между наиболее эффективными вариантами, проходящими тестирование, вместо того, чтобы распределять его поровну между всеми вариантами.

Ошибка, возникающая, когда выборка посетителей, подвергшихся тестированию, не является репрезентативной для всей аудитории, что искажает результаты.

Визуальное представление, показывающее, куда посетители кликают, наводят курсор или прокручивают страницу, полезно для выявления областей, требующих оптимизации.

Метод, который сравнивает текущую версию страницы (чемпион) с одной или несколькими новыми версиями (претендентами), чтобы определить, какая из них показывает лучшие результаты.

Сегментация посетителей на основе их действий или перемещения по сайту.

Все методы, направленные на повышение коэффициента конверсии веб-сайта или приложения.

Интерфейс, позволяющий изменять внешний вид страницы (текст, цвета, элементы) без написания кода, для создания тестовых вариантов.

Кратковременное отображение оригинального контента перед его заменой на тестируемый вариант, что может негативно сказаться на пользовательском опыте.

Следующие шаги, которые проходит посетитель перед совершением покупки (например, страница товара, затем корзина, затем оплата), полезны для выявления случаев, когда пользователи бросают свои покупки.

Ошибочно заключить, что какой-либо вариант выигрывает, когда наблюдаемая разница обусловлена ​​случайностью.

Невозможность выявить реальные различия между вариантами часто объясняется недостаточным размером выборки.

Технический механизм, позволяющий включать или отключать функцию для определенных пользователей без повторного развертывания кода, часто используемый для постепенного внедрения тестов.

Проверяемое утверждение, сформулированное до начала эксперимента, описывающее ожидаемое изменение и его предполагаемое влияние на поведение посетителей.

Показатель, выбранный для измерения успешности теста или эксперимента, например, коэффициент конверсии или средняя стоимость заказа.

Диапазон значений, в пределах которого, по оценкам, с определенной степенью достоверности находится истинный результат теста.

Одновременное тестирование нескольких комбинаций переменных на одной странице для выявления наиболее эффективной комбинации.

Конкретное действие, ожидаемое от посетителя (покупка, регистрация, клик и т. д.), используется для оценки эффективности варианта.

Страница, на которую попадает посетитель после перехода по ссылке, часто является объектом оптимизационных тестов.

Адаптация отображаемого контента к посетителю на основе его профиля или поведения.

Вероятность того, что тест выявит реальное различие между вариантами, если таковое существует; она зависит, в частности, от размера выборки.

Случайное распределение посетителей между различными вариантами теста имеет важное значение для обеспечения надежных результатов.

Разделение посетителей на группы в соответствии с общими критериями (поведение, источник, устройство и т. д.) для проведения целенаправленного анализа или тестирования.

Продолжительность непрерывной активности посетителя на объекте, часто используемая в качестве единицы измерения при анализе результатов испытаний.

Индикатор, позволяющий определить, является ли наблюдаемая разница между двумя вариантами достоверной и не случайной.

Тип теста, который сравнивает два разных URL-адреса, а не две версии одной и той же страницы.

Количество посетителей или сессий, необходимое для достижения достоверной статистической значимости теста.

Процент посетителей, кликнувших на элемент (кнопку, ссылку, баннер), по сравнению с общим числом людей, которые его увидели.

Доля посетителей, выполнивших определенное целевое действие, по отношению к общему числу посетителей.

Процент посетителей, покидающих сайт после просмотра всего одной страницы и без дальнейшего взаимодействия с ним.

Тест, сравнивающий две идентичные версии страницы, используется для проверки правильности работы инструмента тестирования и метода измерения.

Углубленный анализ результатов по завершении тестирования, например, по сегментам аудитории, для извлечения дальнейших уроков.

Вероятность наблюдения результата, по меньшей мере столь же экстремального, как измеренный, если бы между вариантами не существовало реальной разницы; низкое значение повышает уверенность в результате.

Альтернативная версия страницы или элемента, протестированная в сравнении с оригиналом (контрольным вариантом) для оценки ее влияния.