Crossss vs Retail Rocket

Смотрите в каталоге
Системы персонализации

На рынке рекомендательных сервисов есть два фаворита Crossss и Retail Rocket. Сервисы и интернет-магазины регулярно делают различные сплит тесты, одним из таких тестов мы хотим с вами поделиться. К сожалению не вся информация, которую хотелось бы видеть отражена. Возможно представители Crossss и Retail Rocket дополнят этот материал в комментариях.  

A/B тестирование проводил интернет-магазин "средней руки", который не раскрывается.

Цель тестирования: получение информации о эффективности работы сервисов Crossss и Retail Rocket.

Реализация: На сайте интернет-магазина (источник данных не раскрывается) были установлены скрипты сервиса Crossss и Retail Rocket. С помощью внешней платформы convert.com было настроено чёткое разделение аудитории 50% на 50% В тесте сравнивалась конверсия в заказы.

Срок тестирования: с 9 июля по 22 июля

Посещаемость сайта: <10000 визитов

Crossss vs Retail Rocket

(по клику увеличенное изображение)

Итог: в результате A/B теста сервис Crossss показал на 22% лучше конверсию чем у Retail Rocket.

Николай Хлебинский, CEO & Co-Founder Retail Rocket прокомментировал A/B тест: 

Если коротко: эти данные ничего не значат, так как Retail Rocket на момент теста не был настроен. Сплит-тест так же проведен с грубыми ошибками. 

Подробно по пунктам: 

1. На сайте, где проводился тест, наша система была настроена не до конца. В систему некорректно передавались данные о транзакциях (система видела всего лишь 18% всех заказов), кроме того, обучение системы даже на этих неполных данных проводилось всего две недели. Обычно, в случае такой ошибки клиент получает автоматическое письмо о некорретности работы трекинг-кода. На момент начала теста ошибка не была исправлена и у системы просто не было данных. 

2. На момент тестирования на сайте клиента была установлена только одна механика рекомендаций Retail Rocket (рекомендации в карточке товара) из более чем 10, доступных в системе. Какие блоки, в каких шаблонах и какие дополнительные механики (например email) использовались со стороны коллег из другого сервиса – не известно. 

3. Наш сервис открыт для бесплатного тестирования для всех желающих (с нами работают сотни магазинов), к сожалению, мы вообще не знали о том, что проводится тест и не имели возможности вручную проверить корректность настройки. Никаких обращений к нам до окончания теста со стороны владельцев сайта не поступало. 

4. По нашим данным с 9 по 23 июля 2014 года на тестируемом сайте было 21844 посетителей, на представленном скриншоте 15718 посетителей. Куда делись 28.5% посетителей? По нашим данным, с 9 по 23 июля 2014 года на сайте было оформлено 361 транзакций, на представленном скриншоте – 286. Где 21% транзакций? Что вообще считалось конверсией в этом тесте? Судя по используемому инструменту – посещение страницы "спасибо за заказ". Что далеко не равняется количеству оформленных заказов и очень легко искажается людьми, обновляющими thankyoupage. На этом сайте на странице "Спасибо за заказ" есть функциональность отслеживания статуса заказа. Вывод: инструмент для тестирования не был настроен должным образом, представленные данные полностью скомпрометированы и не могут быть использованы для принятия каких-либо решений. 

5. Коллеги из другой системы не смогли предоставить функционал, который запрашивали владельцы сайта. На данный момент код коллег полностью снят, на сайте работает только Retail Rocket. В данный момент мы согласовываем договор.

Обновление (18:13 28.07.14): Коллеги из магазина, на котором был этот тест, только что сообщили нам(Николай Хлебинский), что они уведомляли Crossss о том, что Retail Rocket недонастроен.(скрин переписки получен редакцией Shopolog) 

Все вопросы о данном A/B тесте просим оставлять в комментариях, представители Crossss с радостью ответят на них.

Редакция Shopolog публикует результаты данного A/B теста исключительно для ознакомления.

Компании и сервисы: Crossss, Convert, Retail Rocket
Автор: Игорь Назаров

Подписаться на новости

Читайте также

Эффективность рекламы в Facebook по отраслям

Компания WordStream опубликовала результаты исследования эффективности рекламы в Facebook.  Количество рекламодателей Facebook за последние 18 месяцев увеличилось более чем в два раза. При почти бесконечном множестве вариантов таргетинга объявлений, эффективность может отличаться как у конкретного рекламодателя, так и у целой отрасли. 

далее →

Обсуждение с экспертами новостей прошедшей недели в e-commerce

Наши эксперты: Алексей Прыгин, заместитель генерального директора «МаксиПост»; Наталия Плетнева, директор по продажам DPD в России; Светлана Афанасьева, директор по продажам СДЭК; Антон Бутивщенко, исполнительный директор гарант-сервиса SafeCrow; Алексей Колычев, коммерческий директор платежной системы Wallet One; Иван Артемов, руководитель отдела разработки концепций торговых центров CBRE; Евгений Колесников, руководитель направления «Большие данные и машинное обучение» компании «Инфосистемы Джет»; Юлия Сяглова, преподаватель кафедры маркетинга Института отраслевого менеджмента (ИОМ) РАНХиГС

далее →

Как украинский бизнес использует интернет-маркетинг

Маркетинговое агентство Promodo опубликовало исследование, посвященное интернет-маркетингу в Украине. Исследование отвечает на ряд вопросов, которыми задаются бизнесы, составляя маркетинговую стратегию в интернете: какие инструменты чаще используют, какова их эффективность, какие цели ставят перед интернет-маркетингом и как их измеряют, какая часть рекламного бюджета выделяется на онлайн, кому поручают ведение рекламных кампаний.

далее →

Философский камень для e-commerce, или Как попасть в заветный ТОП-10

Присутствие в ТОП-10 выдачи по ключевому целевому запросу — практически предел мечтаний. Но интернет-магазинов много, и «призовые» места получают не все. Как же выжить в подобной ситуации и получить трафик? Как вывести сайт в лидеры и нужно ли это вообще? Какие инструменты лучше всего использовать? Опытом и наблюдениями делится компания SeoPult, которая вывела в ТОП несколько сотен интернет-магазинов.

далее →

Всё звонки под контролем! Как организовать отдел продаж, обрести гармонию и отправиться в медовый месяц

Мы, как люди взрослые, понимаем, что практически каждая коммерческая организация рано или поздно задумывается о создании отдела продаж. А еще мы, будучи взрослыми, не верим в сказки, поэтому образ Шивы, четырехрукого божества или самого отчаянного мультитаскера в нашей вольной интерпретации, так плохо нам дается. И когда однажды тебе надоедает жонглировать телефоном, портфелем с материалами для встреч, планшетом и ПК, ты создаешь отдел продаж и отправляешься в медовый месяц! История одного бизнеса, который стал контролировать сотовые менеджеров по продажам и обрел гармонию.

далее →

X
Нажмите «Нравится»,
чтобы читать Shopolog.ru в Facebook