XXI. Каков обычный режим Вашей работы?
1 ___ Строго нормированный рабочий день (не бывает сверхурочной работы)
2 ___ Ненормированный рабочий день (часто бывают сверхурочные работы)
В простейших анкетах, которые содержат несколько вопросов и полностью закрытые ответы (экспресс-опрос), допускается "самокодирование" по матрице, отпечатанной в конце опросного листа (схема 21).
Пояснение к матрице таково:
"Все Ваши ответы на поставленные вопросы были пронумерованы подряд. Пожалуйста, просмотрите свои ответы и поставьте отметку в этой таблице, отмечая те номера, которые соответствуют номерам ответов, отмеченных Вами в тексте".
Проба анкеты ("пилотаж"). Любой исследовательский инструмент, как мы уже знаем, проходит проверку на его обоснованность, но именно при использовании анкет наблюдается желание обойтись, так сказать, "кабинетным вариантом", т.е. еще раз проанализировать текст и структуру анкетного листа, не обращаясь к его апробированию на практике [142].
Возможны случаи, когда проба действительно не нужна: анкета полностью заимствована у других исследователей, которые ее опробовали. Но тогда совершенно необходимо, чтобы авторы разработанной анкеты сообщили показатели ее надежности (устойчивости, обоснованности, адекватности получаемой информации). К сожалению, в нашей практике это случается крайне редко.
В обычном "пилотаже" исследователь сначала тщательно анализирует сконструированный опросный лист по всем тем критериям, которые нам уже известны, затем размножает его в 25—30 экземплярах, которые и испытываются на опытной группе респондентов. Эта группа представляет "' микромодель планируемой выборки с выделением крайних значений ее параметров: полярных уровней образования, мужчин и женщин, других особенностей, существенных для представительности выборки.
В углубленном "пилотаже", помимо этого, разрабатывают специальный путеводитель интервью для анкетеров, проводящих пробу. В нем предусматривают вопросы о понимании вопросов анкеты ("интервью об интервью"), модификации конструкций закрытых вопросов, экспериментальные варианты формулировок одного и того же вопроса (в одной части опытного тиража даны одни, в другой — иные варианты), опробируют разные способы общей конструкции опросника, варианты текста вводной части и т.п. Кроме того, проводящие пробу ведут наблюдение за поведением респондентов и их реакцией на вопросы, записывают и анализируют комментарии, которыми респонденты нередко сопровождают свои ответы, учитывают обстановку опроса и возможные факторы, мешающие получению адекватных ответов.
Детализируем общие цели "пилотажа" анкеты в следующих частных задачах.
1. Выдержаны ли требования к языку опрашиваемого, не получилось ли так, что для части респондентов язык слишком труден, для другой, наоборот, примитивен?
2. Все ли вопросы и варианты ответов понятны?
3.Не слишком ли абстрактны вопросы, или не слишком ли они конкретны?
4. Понятны ли респонденту единицы измерения, имеющиеся в анкете?
5. Компетентны ли опрашиваемые для ответов на вопросы, не следует ли включить "фильтры" на компетентность?
6. Нет ли опасности утомить опрашиваемого, как этого избежать, как снизить монотонность?
7. Достаточно ли надежна память опрашиваемого для ответов на вопросы о прошедших событиях, не следует ли подстраховаться на этот случай?
8. Нет ли опасности получения "угодных" или стереотипных ответов?
9. Не слишком ли многочисленны варианты ответов на вопрос, смогут ли респонденты справиться с обилием вариантов, как сократить их число или как расчленить их по блокам?
10. Нет ли опасений вызвать недоверие или какие-нибудь отрицательные эмоции у опрашиваемых?
11. Не слишком ли задевается самолюбие или интимные стороны жизни опрашиваемого?
12. Какие ответы следует истолковывать буквально, а какие - понимать не в прямом смысле, и в каком именно, как осуществить контроль на интерпретацию ответа?
13.Все ли в порядке со стороны графического оформления опросного листа, нет ли переносов в смысловых кусках, насколько четко выделены шрифтами вопросы и инструкция для ответа, нет ли монотонности, однообразия в оформлении?
14. Какие пункты следовало бы особенно тщательно проверить в пробе, нельзя ли сформулировать для них альтернативы и проверить наряду с имеющимся вариантом?
Рассмотрим типичные недостатки, обнаруживаемые путем пилотажного исследования, и их внешние признаки [301, с. 289—295]:
нелогичность и пропуски в ответах, отсутствие порядка в комментариях на открытые вопросы: исследователь не учел различия в уровне культуры, компетентности и образования опрашиваемых;
ответы типа "все или ничего", т.е. при многочленных вариантах ответы группируются только в одном месте: результат стереотипных формулировок или неравного членения содержания ответов на предложенный вопрос; один вариант включает в себя остальные. Следует переформулировать и вопросы и варианты ответов;
большой процент отвечающих "не знаю", "не могу сказать", "не понял" (превышает 5—7% численности опрошенных) говорит о том, что: (а) вопрос или варианты ответов на него туманны, непонятны; (б) слишком сложны для аудитории, не отвечают ее опыту и знаниям; (в) суждения не расчленены на более простые составляющие; (г) единицы счета (если они есть) непонятны или необычны;
множество дополнительных комментариев и замечаний к вопросам, где они не предусмотрены: в закрытых вопросах не полностью развернуто содержание возможных ответов. Дополнительные замечания опрошенных в пробе надо использовать для того, чтобы при массовом опросе более полно раскрыть содержание темы;
существенные изменения в содержании ответов, если порядок вопросов и вариантов ответов на них изменяется. Следует в массовом опросе применять технику "блокирования" и перестановки блоков для разных подвыборок опрашиваемых;
наконец, чрезмерная численность вовсе уклоняющихся от участия в опросе (больше 5%) свидетельствует: о нетактичности, необщительности интервьюера, неудачности общего плана опроса (трудные вопросы расположены близко к началу) или о том, что неблагоприятна сама ситуация опроса [181, 40]: респондента вынуждают прервать занятия своими делами, он торопится или взбудоражен предшествующими событиями, в помещении шумно либо присутствуют посторонние и т.д.
Почтовый опрос, естественно, обеспечивает меньший возврат заполненных анкет. Однако, учитывая его существенно меньшую стоимость (в 10—20 раз дешевле, чем сбор данных путем интервью), этот способ опроса вполне оправдан. Специальные эксперименты показывают, что соблюдение некоторых дополнительных требований может заметно повысить возврат разосланных отправлений и улучшить качество информации. Главные факторы, влияющие на повышение возврата, следующие: уведомление об опросе, посылаемое почтой за 3—4 дня до отправки анкеты респонденту (организаторы опроса обращаются с предложением и просьбой участвовать в обследовании), повышает возврат заполненных анкет на 10-15%. Уведомление по телефону еще более эффективно;
напоминание (через 2—3 недели) о том, что респонденту была направлена анкета, но он не реагировал на обращение (естественно, возврат заполненной анкеты оплачивается организаторами), повышает возврат на 18%, а вторичное напоминание — на 26%;
"вознаграждение", в качестве которого использовался календарь-сувенир стоимостью 2 копейки, повысил возврат на 9%;
персонализация обращения к респонденту, т.е. указание на то, что участие в опросе именно данного лица желательно по условиям статистической выборки, вместо ожидаемого прироста возврата, дало снижение.
Возврат анкет с "безличным" обращением был несколько выше, чем анкет с личным обращением; анонимность или не анонимность в почтовых опросах может быть гарантирована только письменным заверением организации, проводящей опрос, так как анкета выслана данному лицу по его домашнему адресу. Эксперименты в Ленинграде не выявили влияния этого фактора на увеличение доли возврата, как и обратного — снижения возврата при явно не анонимном обращении.
Нельзя забывать о том, что почтовые опросы могут быть представительными, если анкеты рассылаются выборочной аудитории, а не, скажем, читателям данной газеты. Но в последнем случае пропаганда предстоящего опроса по радио и телевидению, не делая его более представительным, повышает заинтересованность потенциальной аудитории на 20%.
Особые разновидности оперативных опросов — радиотелевизионные, а также телефонные, допускающие использование ЭВМ и немедленную обработку данных [181, с. 178—179]. Например, в одной из передач "Общественное мнение", организованной в 1987 г. ленинградским телевидением, было получено более 2 тыс. телефонных ответов на 4 анкетных вопроса, заранее опубликованных в газете "Программы радио и ТВ". Телезрители называли кодовые номера своих ответов на вопрос о согласии, сомнении, несогласии с выборностью руководителей предприятий. Таким же образом отвечали на 3 вопроса о статусе. В студии происходила бурная дискуссия, а компьютер демонстрировал на дисплее динамику реакции телезрителей. Мой собственный опыт участия в этой передаче убедил, что приблизительно к 350-му ответу распределения стабилизируются, а случайная ошибка по расчетам не превышает 5,5%. Вся проблема теперь сводится к качественной представительности аудитории.
Качественную репрезентативность опросов по каналам массовой информации можно несколько повысить путем коррекции фактически стихийной выборки. Случайным отбором надо сократить долю анкет, поступивших от слишком активной части аудитории так, чтобы сохранить пропорциональность этой доли в общем массиве опрошенных. Конечно, если опрос не имеет целью репрезентировать какую-то группу населения, можно и не производить такую коррекцию [71, с. 369—380].
Экспертный опрос. Опрос специалистов - особая разновидность метода, где многие требования, применимые в массовых опросах, неприемлемы [68; 108, с. 122-127; 283]. Эти опросы не анонимны, исключают "ловушки", так как предполагают активное сотрудничество опрашиваемого в выяснении поставленных проблем.
Как правило, экспертный опрос нацелен на уточнение гипотез, разработку прогноза и пополнение интерпретации определенных социальных явлений и процессов. В таких опросах доминируют открытые формулировки, а закрытые вопросы предназначены лишь для оценки уровня уверенности, меры согласия или несогласия с уже высказанными позициями других специалистов...
Важный момент: отбор экспертов прежде всего по уровню их компетентности, (численность и представительность группы экспертов здесь оценивается не столько статистическими, сколько качественными показателями) и далее — предоставление возможности эксперту достаточно свободно высказать свои мнения и аргументы в их пользу.
Тема опроса четко обозначается в строгих научных формулировках, задачи исследования также должны быть ясно сформулированы, подчеркивается важность именно персонального мнения специалистов (в массовых опросах, напротив, подчеркивают, что мнение опрашиваемого учитывается в рамках общей статистики). Для ответа на каждый вопрос оставляется достаточно пространное поле, анализ данных скорее качественный, чем количественный.
Один из вариантов техники экспертного опроса ("метод Дельфы") -неоднократное обращение к экспертам, вначале — для выявления существа позиций, а затем — для оценки уровня согласованности мнений по наиболее важным пунктам. После первой экспертизы высказанные оценки предлагаются для упорядочения по уровню правдоподобности, вероятности, достоверности, приоритетности.
Типичная логика развертывания экспертного опроса такова: (1) указание существа изучаемой проблемы и мотивов обращения к данному лицу в качестве специалиста; (2) сведения, убеждающие в компетентности эксперта: область занятий, стаж в этой области, квалификация; (3) информация о порядке (содержании) предлагаемых вопросов в полном их объеме; (4) формулировка каждого проблемного вопроса, предлагающая либо свободные высказывания и комментарии с просьбой указать упущения, слабые места, сомнительные пункты в аргументации либо обоснование постановки иной проблемы; (5) дополнительные замечания, комментарии, предложения.