3. Не слишком ли абстрактны вопросы, или не слишком ли они конкретны?
4. Понятны ли респонденту единицы измерения, имеющиеся в анкете?
Выполняется ли логическая структура вопроса? Она включает: область известной информации, область неизвестного (о чем спрашивается) и область поиска ответа (закрытия, открытый вопрос).
5. Каков контекст вопроса, не следует ли его изменить, как толковать ответ именно в этом контексте?
6. Предусмотрены ли варианты уклонений от ответа, т. е. право не отвечать?
7. Хорошо ли объяснена область поиска ответа, т. е. понятны ли альтернативы, условия выбора одного или нескольких вариантов ответа, подробность свободного ответа, совмещения ряда ответов и т. п.?
8. Нет ли пересечения логических оснований в вариантах ответа?
9. Сбалансированы ли упорядоченные шкалы, нет ли сдвига в позитивный или негативный полюс шкалы? Особенно важно предусмотреть среднюю позицию на шкале.
10. Выделены ли тематические блоки вопросов так, чтобы создать психологический комфорт респонденту?
11. Компетентны ли опрашиваемые для ответов на вопросы, не следует ли включить "фильтры" на компетентность?
12. Нет ли опасности утомить опрашиваемого, как этого избежать, как снизить монотонность?
13. Достаточно ли надежна память опрашиваемого для ответов на вопросы о прошедших событиях, не следует ли подстраховаться на этот случай?
14. Нет ли опасности получения "угодных" или стереотипных ответов?
15. Не слишком ли многочисленны варианты ответов на вопрос, смогут ли респонденты справиться с обилием вариантов, как сократить их число или как расчленить их по блокам?
16. Нет ли опасений вызвать недоверие или какие-нибудь отрицательные эмоции у опрашиваемых?
17. Не слишком ли задевается самолюбие или интимные стороны жизни опрашиваемого?
18. Какие ответы следует истолковывать буквально, а какие — понимать не в прямом смысле, и в каком именно, как осуществить контроль на интерпретацию ответа?
19. Все ли в порядке со стороны графического оформления опросного листа, нет ли переносов в смысловых кусках, насколько четко выделены шрифтами вопросы и инструкция для ответа, нет ли монотонности, однообразия в оформлении?
20. Какие пункты следовало бы особенно тщательно проверить в пробе, нельзя ли сформулировать для них альтернативы и проверить наряду с имеющимся вариантом?
Рассмотрим типичные недостатки, обнаруживаемые путем пилотажного исследования, и их внешние признаки [333. С. 289— 295]:
• нелогичность и пропуски в ответах, отсутствие порядка в комментариях на открытые вопросы: исследователь не учел различия в уровне культуры, компетентности и образования опрашиваемых;
• ответы типа "все или ничего", т. е. при многочленных вариантах ответы группируются только в одном месте: результат стереотипных формулировок или неравного членения содержания ответов на предложенный вопрос; один вариант включает в себя остальные. Следует переформулировать и вопросы, и варианты ответов;
• большой процент отвечающих "не знаю", "не могу сказать", "не понял" (превышает 5—7% численности опрошенных) говорит о том, что: (а) вопрос или варианты ответов на него туманны, непонятны; (б) слишком сложны для аудитории, не отвечают ее опыту и знаниям; (в) суждения не расчленены на более простые составляющие; (г) единицы счета (если они есть) непонятны или необычны;