Принцип Леттермана

Как следует проводить опрос — при помощи личной беседы или письменных анкет?

Я был скептически настроен по отношению к письменным опросам и искал наглядную иллюстрацию к тому, почему письменные опросы часто дают очень незначительные результаты. Однажды вечером мне повезло, я включил программу Дэвида Леттермана.

Одним из гостей программы в этот вечер была Хелен Томас, политический комментатор с большим стажем. После нескольких минут непринужденной беседы Леттерман задал Томас серьезный вопрос: «Кто из кандидатов, участвующих в выборах 1996 года, вам наиболее симпатичен?»

Многие телезрители думали, что Томас ответит: «Боб Доул». Другие ожидали, что она удивит всех предсказанием, что Билл Клинтон соберется с силами и будет избран на второй срок. Но Томас не назвала Доула, Клинтона или даже Квейла. Она дала еще более неожиданный ответ: «Мне не нравится никто из них».

Томас не собиралась шутить. Она неправильно поняла вопрос Леттермана, так же как и Леттерман не подумал о том, как Томас воспримет его вопрос. Спортивные болельщики поняли, что имел в виду Леттерман. Слова «Кто вам наиболее симпатичен в Суперкубке?», например, означают: «Кто, по-вашему, имеет больше шансов на победу?» Но для многих других, в особенности для женщин, вопрос «Кто вам симпатичен?» имеет совсем другое значение.

Наша речь полна двусмысленных слов, таких как «симпатичен» или «нравится». Словарь издательства Random House дает, например, двадцать шесть различных толкований слова «read». Но ни один письменный опрос не может пояснить каждое употребленное в нем слово или использовать только те слова, которые не нуждаются в разъяснениях, и ни один исследователь не сможет точно интерпретировать каждое слово, написанное каждым респондентом.

Хороший пример: маркетинговая фирма недавно попросила взрослых домовладельцев оценить важность различных характеристик работ по ремонту дома. Естественно, первое место с большим отрывом заняла такая характеристика, как «качество». Но что означало слово «качество» для отвечавших? Означало ли оно количество полировки и лака? Качество, видное невооруженным глазом, или качество, каким его увидит опытный профессионал? Качество, заключающееся в том, насколько конечный продукт будет хорош при использовании его для задуманных целей? Или они имели в виду качество обслуживания клиентов — быстрое реагирование подрядчиков на предложения заказчика и приветливость секретаря?

Этот опрос является хорошей иллюстрацией тех проблем, которые возникают при любом письменном опросе. Люди, проводившие опрос, интерпретировали ответы, основываясь на том, что они подразумевали под своими вопросами, — в то время как те люди, которые отвечали на них, подразумевали под своими ответами совершенно другие вещи.

Если вы проводите письменные опросы, вы никак не можете избежать этой проблемы, слишком часто вы даже не видите, что такая проблема существует. Но если вы проводите устный опрос, вы можете при необходимости пояснить свой вопрос или попросить опрашиваемого разъяснить свои ответы.

Каждый раз, когда вы испытываете искушение провести письменный опрос, вспомните о Дэвиде Леттермане и Хелен Томас.

Остерегайтесь письменных опросов, если у вас нет абсолютной уверенности в том, что вы сможете правильно интерпретировать их результаты.