Презентация о пользе А/Б-тестирования
Однажды в компании «М» встал вопрос о важности проведения тестирования. Пришлось объяснить сотрудникам компании «на пальцах» какое это замечательное мероприятие и как оно упрощает жизнь.
А/Б-тестирование основывается на первоначальном восприятии элемента или группы элементов. Поэтому так важно испытывать его на небольшом кол-ве людей для того, что бы как можно больше человек увидело тот самый, выигрышный вариант. Постараюсь привести пример.
Задача: Повысить продажи автомобиля Ягуар
Решение: Размещение рекламного баннера на Пулковском шоссе. Проведение
тестирования ключевой фразы.

Рекламный щит.
Вариант А
Новый Ягуар Икс-тайп. Экономьте до 20% при покупке!

Рекламный щит.
Вариант Б
Новый Ягуар Икс-тайп. Скидка 20% при покупке!
Начинаем тестирование.
Размещаем наши рекламные щиты

Утро, предположим, вторник, Пулковское шоссе. Из Красного села едет Григорий. Григорий всегда так ездит на работу потому что ближе. А вот вечером тут пробки, поэтому он едет по КАДу. В общем, едет он на работу и видит щит.

В это же время и тоже по Пулковке едет на работу в Красное село Виктор. Домой он возвращается другой дорогой. То есть по пути на работу Виктор замечает щит:

Изо дня в день наши товарищи испытуемые видят этот баннер:
Григорий:

Виктор:

И тут Выясняется, что с Варианта А «Новый Ягуар Икс-тайп. Экономьте до 20% при покупке!» Позвонило 125 человек, в то время когда с варианта В лишь 21. Ура! Определенно победа Варианта А ! Делаем его! Итак приезжают рабочие, отклеивают неудачный вариант наклеивают хороший, с продающим текстом. Что же это поменяет и как отразится на наших героях? Григорий как собирался заехать после ЗП так и собирается:

А вот Виктор что-то не так оптимистичен:

В чем же дело ? :( Надпись же нужная и продающая! Дело в первом впечатлении. Увидев один раз то, что не заинтересовало трудно изменить мнение человека, поменяв одну небольшую деталь. Что же делать в таком случае и как привлечь внимание невпечатленного Виктора? Стопроцентно-верного решения дать,увы, уже невозможно. Мы можем лишь предполагать, что только надпись сыграла роль в повышении кол-ва звноков. Надпись, а не ее удачное сочетание с фотографией. Поэтому в наших силах лишь проэксперементировать, предоставив Виктору совершенно иной рекламный щит, кардинально отличающийся от того что был. Но это уже другой плакат, другое тестирование и другая история.

Вывод: В данном случае проводить тестирование нужно было на участке дороге с минимальным потоком автомобилистов, т.к. при таком расположении будущий процент потенциальных клиентов был бы больше. Так и в сети: нужно проверять только одно состояние тестируемого элемента на небольшом количестве пользователей.