Інтернет-магазин Ozon.ru почав проводити A/B Testing окремих елементів свого сайту. На скріншотах нижче видно різні назви блоку персональних рекомендацій у двох користувачів (скріншоти зроблені під різними акаунтами в один і той же час). Під одним акаунтом рекомендаційний блог називається Персональні рекомендації, під іншим - Можливо вас це зацікавить.
Методика A/B Testing (A/B тестування) полягає в показі різних варіантів сайту або його елементів різним групам користувачів і подальшому зборі статистики поведінки цих груп. У простішому випадку можна тестувати тільки два варіанти (звідси і береться назва A/B Testing), але можна і ускладнити завдання до 3 + варіантів (іноді це називають MVT Testing, від multivariate). За допомогою такого підходу за невеликий проміжок часу можна визначати який варіант дизайну або інтерфейсу краще (в сенсі переглядів, кліків, замовлень, грошей або інших метрик). Надалі, можна вибирати найбільш вдалий варіант, або показувати різним сегментам користувача різні дизайни, залишаючи сегмент для тестування. Підхід дуже інтерес як в плані аналітики, так і маркетингу, а головне, дає практичні результати.
Для реалізації A/B тестування потрібні відповідні технологічні рішення і система збору статистики. Потрібно показувати різним користувачам різні сайти, при цьому, фіксувати кому і що було показано. А ще вибірки користувачів повинні хоча б трохи бути правильними з точки зору статистики, за обсягом, за випадковістю вибору, повинна бути виділена контрольна група (раніше я про це писав). Для показу варіантів Ozon.ru використовує власні розробки, а для збору та обрахунку статистики систему веб-аналітики від Omniture.
В англомовному сегменті інтернету A/B Testing застосовується дуже широко. Але в рунеті, наскільки мені відомо це перші досліди на сайтах такого масштабу. На мій погляд, це дуже правильний крок для Озона поряд із запуском системи персональних рекомендацій, C2C торгівлі, продажу цифрого контенту (книг і софту) і наданням свій веб-вітрини іншим магазинам.
Ця стаття в моєму блозі.
