В простых случаях получить информацию о результатах ваших действий сравнительно легко. Когда вы учитесь водить машину, представить себе, что произойдет, если вы въедете в крутой поворот горного серпантина на скорости 130 км/ч, довольно просто: привет, ущелье! Но при более сложных задачах найти нужные данные намного труднее. Вы можете собрать факты, они вам наверняка будут полезны, но, чтобы понять и оценить причинно-следственные связи, вам нужно видеть глубже. Ну и, конечно, вы можете целенаправленно поставить эксперимент и получить необходимые сведения.

Не так давно мы встречались с топ-менеджерами большой транснациональной торговой компании, владеющей сетью супермаркетов. Они тратили миллионы долларов в год на рекламу в США. Большей частью ее размещали на телевидении и в воскресной прессе, но при этом руководители не были уверены в том, что она эффективна. Со временем они пришли к выводу, что результативность телевизионной рекламы в четыре раза выше, чем рекламы в прессе.

Мы спросили, как они это узнали. Возникла красивая полноцветная презентация с таблицами и графиками, которые демонстрировали связь между телерекламой и продажами. Было очевидно, что за каждым показом рекламного ролика следует всплеск продаж. Ценнейшая обратная связь, правда? Ну… давайте попробуем разобраться.

– Как часто, – спросили мы, – вы пускали рекламу в эфир?

Директора объяснили нам, что поскольку реклама на ТВ намного дороже печатной, то они сфокусировали ее только на трех днях: «черная пятница»[6], Рождество и День отца. Иными словами, компания тратила миллионы долларов на то, чтобы убедить людей отправиться за покупками, когда они и без того собирались потратиться.

Так как же руководители могли знать, что телереклама вызывает рост продаж? Никак! Причину и следствие в их случае можно поменять местами, то есть сказать, что ожидаемый рост продаж обеспечивал покупку телерекламы. Вполне возможно, что продажи компании были бы точно такими же и в случае, если бы на телерекламу не потратили ни доллара. Ценность такой обратной связи практически равна нулю.

Потом мы перешли к печатной рекламе. Как часто она выходила? Один из директоров не без гордости сообщил, что компания давала рекламные блоки каждое воскресенье в течение последних 20 лет в 250 региональных изданиях по всей территории США.

Как они могли оценить эффективность именно этой рекламы? Никак. Если ничего не менять, то выяснить это невозможно.

– Что если, – предложили мы, – компания проведет эксперимент, чтобы все выяснить? В науке случайная контрольная выборка является золотым стандартом исследований уже сотни лет, но почему же все лавры должны доставаться ученым?

Мы описали эксперимент, который могла бы организовать компания. Надо выбрать по всей стране 40 регионов с нормальными продажами и разделить их случайным образом на две группы. В первой группе компания продолжит давать рекламу каждое воскресенье, а во второй полностью уйдет в тень: ни одного объявления в течение трех месяцев. Затем результаты продаж в двух группах сравниваются и становится понятно, насколько печатная реклама важна.