Интересный инсайт по А/В тестам из рассылки Пипа Ладжи

148

Люди говорят "просто проведите А/В тест", как будто это так же просто, как написать заголовок.

Словно вы можете провести статистически достоверные тесты на любой странице, на любом сайте.

Ирония заключается в том, что люди, чья работа на самом деле заключается в проведении экспериментов, так не говорят.

Они знают лучше, они знают, как работает статистика.

Печальная правда заключается в том, что большинство сайтов B2B SaaS не имеют такого объема транзакций, чтобы проводить хотя бы один достоверный тест в месяц (речь про оптимизацию конверсии - CRO).

А большинство маркетологов практически не имеют статистического образования, чтобы понимать, что лучше.

Они покупают программное обеспечение для персонализации, нацеливаются на сегменты, которые получают около 40 регистраций в месяц - и "проводят эксперименты".

Они проводят A/B-тест, получают 11 против 19 подписок, объявляют свои тесты победой и рассказывают своей команде, чему они научились.

На самом деле они не узнали ничего нового и теперь с энтузиазмом движутся в неправильном направлении.

Когда кто-то предлагает провести A/B-тест, уточните у него: "Как вы узнаете, когда тест будет завершен?". Скорее всего, у них нет ни малейшего представления об этом.

@MikeBlazerX