Вопросник и порядок его разработки
Главными инструментами реализации методов наблюдения и опроса являются анкета (вопросник) и механические устройства, например, счетчики количества людей, кино- и видеокамеры. Ниже будет чаше использоваться термин «вопросник», поскольку он носит более общий характер. Анкета применяется только при письменных ответах на поставленные вопросы.
Вопросник – опросный лист для получения каких-то сведений. Он выполняет следующие функции: 1. Переводит цели исследования в вопросы. 2. Стандартизирует вопросы и форму ответа на них. 3. Текст и последовательность вопросов способствуют кооперации интервьюера с респондентами, стимулируют получение ответов на все вопросы. 4. При автоматическом введении данных вопросника в компьютер ускоряется анализ результатов исследования. 5. Служит целям проверки надежности и достоверности оценок.
Перечень данных функций подчеркивает важность уделения серьезного внимания составлению вопросников. Обычно этот процесс осуществляется в следующей последовательности:
1. Определение целей опроса.
2. Выбор методов сбора данных.
3. Разработка вопросов.
4. Оценка вопросов.
5. Одобрение со стороны клиента.
6. Тестирование.
7. Уточнение анкет.
Определение целей опроса и выбор методов сбора данных были рассмотрены ранее. Ниже характеризуется процесс непосредственного составления вопросника. Этот процесс носит итеративный характер и направлен на последовательное уточнение вопросника, повышение вероятности получения достоверных ответов, исключения влияния содержания вопросов и их формата на получаемые ответы. Кроме того, заказчику данного опроса также должно быть дано право оценить содержание вопросника; ему может быть дано право поставить свою подпись на экземпляре анкеты перед ее копированием. Заказчик прежде всего оценивает вопросник с точки зрения целей проводимого обследования и полноты охвата исследуемой проблемы.
Вопросник обычно состоит из трех частей: введения, реквизитной части и основной части.
Главная задача введения – убедить респондента принять участие в опросе. Оно должно содержать цель проводимого опроса и должно показать, какую пользу получит респондент, приняв участие в опросе. Кроме того, из введения должно быть понятно, кто проводит данный опрос и сколько потребуется времени для ответа на поставленные вопросы. Если опрос проводится по почте, введение может быть написано в виде сопроводительного письма.
В реквизитной части приводится информация, касающаяся респондентов: возраст, пол, принадлежность к определенному классу, род занятий, семейное положение, имя и адрес для частных лиц и для организаций: размер, месторасположение, направление производственно-хозяйственной деятельности, положение респондента в организации, его имя. Кроме того, необходимо идентифицировать сам вопросник, то есть дать ему название, указать дату, время и место проведения опроса, фамилию интервьюера.
При разработке основной части вопросника следует обратить внимание на: тип вопросов (формат ответов), содержание вопросов и их число, последовательность представления вопросов в анкете, наличие контрольных вопросов.
Существует три основных формата задаваемых вопросов: открытые вопросы, закрытые вопросы и вопросы со шкалой ответов.
Открытый вопрос – вопрос анкеты, позволяющий опрашиваемому на вопрос отвечать своими словами, что дает ему возможность чувствовать себя при ответе на вопрос достаточно свободно, приводить примеры, иллюстрации. Открытые вопросы часто приводятся в начале анкеты для «разминки» респондентов. Примером открытого вопроса является вопрос: «Что Выдумаете о..?» В таких вопросах отсутствует предвзятость, стремление навязать определенный ответ. Однако ответы на открытые вопросы требуют достаточно больших затрат времени. Кроме того, полученные ответы могут быть интерпретированы по-разному.
Закрытый вопрос включает все возможные варианты ответов, из которых опрашиваемый делает свой выбор. Существует два варианта таких вопросов: 1. Дихотомический, типа: «Имеете ли Вы счет в банке?» В данном случае имеется только два варианта ответа: да, нет. 2. Многовариантного выбора, типа: «Где Вы храните свои сбережения?» со следующими, скажем, вариантами ответов:
– в банке;
– в страховой компании;
– в строительной компании;
– дома,
из которых респондент может выбрать один или несколько ответов.
Использование данного типа вопросов активизирует деятельность респондентов по заполнению анкет, облегчает процесс ввода полученных данных.
Недостатками вопросов с многовариантным выбором являются:
1. Трудности формулирования всех возможных вариантов ответов, характеристик или факторов.
2. Трудности, обусловленные необходимостью использовать общепринятую терминологию, что необходимо для того, чтобы все респонденты одинаково понимали заданные вопросы.
3. Трудность измерения относительной важности отдельных альтернатив, характеристик или факторов. Относительная важность или «веса» могут определяться как в качественной шкале (например, от «не имеет значения» до «имеет очень большое значение»), так и в количественной шкале (например, в долях 100-балльной шкалы).
Трудности, обусловленные разработкой анкет с многовариантными ответами, обычно преодолеваются следующим образом:
1. Организуется дискуссия в малой группе (до 8–10 человек) по поводу набора вопросов, факторов, терминологии и др.
2. Проводится интервью с потенциальным респондентом, в результате которого уточняются вопросы, характеристики, факторы и терминология.
Вопросы со шкалой ответов, предполагающие проведение измерений изучаемых свойств и параметров, были рассмотрены ранее.
Рассмотрим факторы, которые следует учитывать при выборе формата вопросов.
При выборе формата вопросов целесообразно учитывать: 1) природу измеряемого свойства; 2) результаты предыдущих исследований; 3) метод сбора данных; 4) желаемый уровень шкалы измерений; 5) способности респондентов.
Природа измеряемого свойства учитывается при определении, нужен ли ответ типа «да», «нет», «не помню» (вопрос: «Покупали ли Вы в течение последнего месяца сигареты «Мальборо»?) или нужен шкалированный ответ на вопрос типа: «Вам нравятся сигареты «Мальборо»?
В ряде случаев исследование основано на результатах, полученных ранее. Иногда используется ранее применяемый вопросник. В любом случае целесообразно использовать ранее апробированные форматы вопросом, чем изобретать новые.
Что касается метода сбора данных, то очевидно, что, скажем, телефонное интервью предполагает использование относительно простых вопросников по сравнению с опросами, проводимыми по почте.
Определяя содержание вопросов, необходимо учесть следующие обстоятельства.
Вопрос должен быть сфокусирован по одной проблеме или теме, должен быть кратким и понятным. Все респонденты должны понимать заданный вопрос одинаковым образом и отвечать на один и тот же вопрос, а не на свои варианты его домысливания.
Вопрос не должен выходить за рамки опыта респондентов. Наверное, бессмысленно спрашивать подростков о том, какой тип семейного автомобиля они приобретут, когда женятся. Если вопрос касается прошлого, помните, что далеко не все обладают хорошей памятью.
Вопросы следует формулировать в нейтральной тональности, без некой положительной или отрицательной оценки рассматриваемой проблемы, они не должны склонять респондента к ответу, желаемому для исследователя.
При определении числа вопросов следует руководствоваться тезисом: чем их меньше, тем больше шансов получить на них ответы.
Желательно, чтобы вопросы излагались в определенной логической последовательности. Вначале следует задать вопросы, с помощью которых можно определить уровень компетентности респондентов в области проводимого исследования. Следующие вопросы служат целям «разминки» респондентов. Эти вопросы являются относительно простыми, легкими для ответов; они должны заинтересовать опрашиваемых, показать им, что они легко справятся с ответами. За разминочными вопросами следуют основные вопросы.
Наиболее трудные вопросы, требующие для ответа использования специальных шкал и достаточных затрат умственных усилий, рекомендуется ставить в середине или ближе к концу анкеты.
Обычно респондент, если дошел до данной части вопросника, как правило, отвечает и на оставшиеся вопросы. Опытные интервьюеры при проведении устного опроса в этом месте обычно говорят, что интервью вступило в завершающую стадию.
В конце вопросника приводятся классификационные вопросы, постановка которых в его начале, вследствие их персонального характера, может вызвать у респондента желание прекратить ответы на вопросы. Сюда относятся демографические вопросы о возрасте, образовании, национальности, уровне дохода и т.п.
Вопросы, носящие чрезмерно личный характер («Чистите ли Вы зубы каждый день?» «Часто ли Вы на своем автомобиле превышаете допустимую скорость?»), обычно помещаются среди «безвинных» вопросов.
Вышерассмотренное носит характер общих рекомендаций. Однако существует по крайней мере два специальных подхода к проектированию вопросников: туннельный и секционный.
При использовании туннельного подхода имеет место постепенный переход от широких, общих вопросов к узким, частным вопросам. Общие вопросы служат целям «разминки», а также, если это требуется, могут носить переходный характер.
Секционный подход заключается в том, что последовательно рассматриваются вопросы по отдельным темам, до их полного исчерпания. Переход к следующей теме часто начинается с некоторой вступительной фразы.
На практике зачастую используется комбинация рассмотренных подходов.
Финальной стадией разработки вопросника, после его тестирования на ограниченном круге лиц и уточнения, является кодирование вопросов с целью облегчения задачи ввода данных после их сбора. Обычно используются числовые коды, характеризующие разные варианты ответов.
Опрос может носить анонимный и конфиденциальный характер.
В первом случае респондент должен быть уверен, что его имя и другие реквизиты не будут известны исследователям. Во втором случае предполагается, что имя респондента известно только исследователю, но отнюдь не заказчику данного обследования. В телефонном опросе и при опросах, связанных с присутствием интервьюеров, опрос носит только конфиденциальный характер.
Основные понятия выборочных исследований
Рассмотрим основные понятия, используемые при проведении выборочных исследований.
На данном этапе маркетинговых решений возникает необходимость получить информацию о параметрах «группы», среди членов которой будет проводиться маркетинговое исследование. Например, управляющий маркетингом желает иметь данные об объеме сбыта продуктов его компании через различные типы розничных магазинов («группа»). Такая «группа» в статистике называется генеральной совокупностью или просто совокупностью. Иногда совокупность является достаточно малой по своей численности, и менеджер может изучить всех ее членов. Обычно же это сделать невозможно – изучить, например, мнение всех детей возраста от 3-х до 5-ти лет относительно игрушек определенного типа. Следовательно, проводится изучение только части совокупности, называемой выборкой.
Выборка является базовым уровнем проводимых исследований.
Необходимо отметить, что, поскольку выборка является частью изучаемой совокупности, полученные от выборки данные скорее всего не будут в точности соответствовать данным, которые можно было бы получить от всех единиц совокупности. Различие между данными, полученными от выборки, и истинными данными, называется ошибкой выборки. Ошибка выборки обусловливается двумя факторами: методом формирования выборки и размером выборки. Эти вопросы будут рассмотрены ниже.
Формирование выборки прежде всего основывается на знании контура выборки, под которым понимается список всех единиц совокупности, из которого выбираются единицы выборки. Например, если в качестве совокупности рассматривать все автосервисные мастерские города Москвы, то надо иметь список таких мастерских, рассматриваемый как контур, в пределах которого формируется выборка.
Контур выборки неизбежно содержит ошибку, называемую ошибкой контура выборки и характеризующую степень отклонения от истинных размеров совокупности. Очевидно, что не существует полного официального списка всех автосервисных мастерских города Москвы, включая полулегальный и нелегальный бизнес в данной области. Исследователь должен информировать заказчика работы о размерах ошибки контура выборки.
При формировании выборки используются вероятностные (случайные) и невероятностные (неслучайные) методы.
Если все единицы выборки имеют известный шанс (вероятность) быть включенными в выборку, то выборка называется вероятностной. Если эта вероятность неизвестна, то выборка называется невероятностной. К сожалению, в большинстве маркетинговых исследований из-за невозможности точного определения размера совокупности не представляется возможным точно рассчитать вероятности. Поэтому термин «известная вероятность» скорее основан на использовании определенных методов формирования выборки, чем на знании точных размеров совокупности.
Вероятностные методы включают в свой состав: простой случайный отбор, систематический отбор, кластерный отбор и стратифицированный отбор.
Простой случайный отбор предполагает, что вероятность быть избранным в выборку известна и является одинаковой для всех единиц совокупности. Вероятность быть включенным в выборку определяется отношением объема выборки к размеру совокупности.
Простой случайный отбор может осуществляться с помощью следующих методов: формирования выборки вслепую и с помощью таблицы случайных чисел.
При использовании метода формирования выборки вслепую единицы совокупности в соответствии с их фамилиями, названиями или другими признаками вносятся в карточки, которые в перемешанном виде помещаются в какую-то непрозрачную емкость (ящик, коробку и т.п.). Из данной емкости кто-то случайным образом вытягивает число карточек, определяемое объемом выборки.
В таблицах случайных чисел содержатся числа, порядок включения которых в таблицу осуществлен случайным образом. Единицам совокупности присваивают порядковые номера. В таблице случайных чисел выбирают любую начальную точку и, двигаясь в произвольном направлении и произвольно меняя направление движения, выбирают необходимое количество номеров из числа присвоенных, равное заранее установленному объему выборки.
Использование простого случайного отбора гарантирует, что каждая единица совокупности известна и имеет равные шансы быть включенной в выборку.
Однако чтобы можно было эти методы использовать, необходимо предварительно определить каждую единицу совокупности, что при больших размерах совокупности сделать достаточно сложно, а порой и невозможно.
Данный недостаток существенно снижается при использовании компьютера для присвоения единицам совокупности номеров и формирования выборки. При телефонном интервью компьютер может генерировать случайным образом телефонные номера: он имеет генератор случайных чисел.
Начальная часть метода систематического отбора соответствует начальной части метода простого случайного отбора: необходимо получить полный список единиц генеральной совокупности.
Однако далее вместо присвоения порядковых номеров используется показатель «интервал скачка», рассчитанный как отношение размера совокупности к объему выборки. Например, если используется телефонный справочник и интервал скачка был определен равным 250, то это означает, что каждый 250-й телефонный номер включается в выборку. Однако для определения начальных страницы и колонки справочника используются случайные числа.
Очевидно, что данный метод является более экономичным и быстрым по сравнению с методом простого случайного отбора. Случайные числа используются только на начальной стадии его реализации. Вместе с тем такой метод дает менее репрезентативные результаты по сравнению с методом простого случайного отбора.
Особенно широко метод систематического отбора используется, когда для различных видов совокупностей имеются различные справочники, списки, спецификации и т.п. материалы.
Другим методом вероятностного отбора является кластерный отбор, основанный на делении совокупности на подгруппы, каждая из которых представляет совокупность в целом. Базовая концепция данного метода очень похожа на базовую концепцию метода систематического отбора, однако реализация этой концепции осуществляется по-другому. Предположим, что исследуется мнение населения какого-то региона относительно марки какого-то товара.
Регион разбивается на четко определяемые части (кластеры), например области. Исследователь может считать, что выделенные кластеры являются идентичными и мнение населения этих областей характерно для региона в целом. Далее одна из областей (один кластер) выбирается случайным образом, определяется совокупность для этой области, в ней проводится соответствующее исследование, а выводы относятся к совокупности всего региона (одноступенчатый подход).
В основе всех описанных методов лежит предположение, что любая совокупность характеризуется симметричным распределением ее ключевых характеристик. Говоря другими словами, каждая выборка достаточно полно характеризует всю совокупность, различные крайности в выборке уравновешивают друг друга. Но такая ситуация на практике встречается крайне редко. Скажем, исследуется рыночный потенциал определенного региона для какого-то товара. Население больших, средних и малых городов, сельской местности данного региона отличается по уровню образования, доходу, образу жизни и т.п.
В случае несимметричного распределения совокупности последняя разделяется на различные подгруппы (страты), например, по уровню доходов, и выборки формируются из этих подгрупп, по сути дела являющихся сегментами рынка. Такой метод носит название стратифицированного отбора.
Далее для каждой страты с помощью случайного отбора формируется выборка.
При применении невероятностных методов отбора формирование выборки осуществляется без использования понятий теории вероятностей, вследствие чего невозможно рассчитать вероятность включения в выборку единицы совокупности.
Кратко охарактеризуем следующие невероятностные методы отбора: отбор на основе принципа удобства, отбор на основе суждений, формирование выборки в процессе обследования и формирование выборки на основе квот.
Смысл метода отбора на основе принципа удобства заключается в том, что формирование выборки осуществляется самым удобным с позиций исследователя образом, например, с позиций минимальных затрат времени и усилий, с позиции доступности респондентов. Выбор места исследования и состава выборки производится субъективным образом, например, опрос покупателей осуществляется в магазине, ближайшем к месту жительства исследователя. Очевидно, что многие представители совокупности не принимают участия в опросе.
Формирование выборки на основе суждения основано на использовании мнения квалифицированных специалистов, экспертов относительно состава выборки. На основе такого подхода часто формируется состав фокус-группы.
Формирование выборки в процессе опроса основано на расширении числа опрашиваемых исходя из предложений респондентов, которые уже приняли участие в обследовании. Первоначально исследователь формирует выборку намного меньшую, чем требуется в проводимом исследовании, затем она по мере проведения обследования расширяется.
Формирование выборки на основе квот (квотный отбор) предполагает предварительное, исходя из целей исследования, определение численности групп респондентов, отвечающих определенным требованиям (признакам). Например, в целях исследования было принято решение, что в универсаме должно быть опрошено пятьдесят мужчин и пятьдесят женщин. Интервьюер проводит опрос, пока не выберет установленную квоту.
На практике имеет место одновременное использование нескольких методов формирования выборки.
Этапы разработки выборочного плана
Рассмотренные выше понятия выстраиваются в определенную логическую последовательность отдельных шагов (этапов) по разработке выборочного плана, целью которого является получение конечного варианта выборки. Можно выделить следующие обобщенные этапы разработки выборочного плана:
1. Определение соответствующей совокупности.
2. Получение «списка» совокупности.
3. Проектирование выборочного плана.
4. Достижение нужного объема выборки или ее переформирование.
Кратко охарактеризуем отдельные этапы разработки выборочного плана.
На первом этапе определяется целевая совокупность, определяемая целями исследования. Четко устанавливаются характеристики, которым должны удовлетворять единицы совокупности и которые дают возможность отличить целевую совокупность от других возможных совокупностей.
На втором этапе устанавливается, откуда может быть получен перечень единиц совокупности. Это нужно для установления контура выборки. Здесь используются соответствующие справочники, данные переписи населения и местных органов власти, материалы различных консультационных организаций.
На данном этапе также необходимо оценить ошибку контура выборки. Для этого необходимо: 1. Определить, насколько список людей (юридических лиц), включенных в контур выборки, отличается от совокупности в целом. 2. Установить, какой контингент людей не вошел в состав контура выборки.
На третьем этапе с учетом ранее выполненных работ осуществляется проектирование самой выборки. Здесь необходимо найти баланс между структурой выборки, затратами на сбор данных и объемом выборки; в деталях обсудить выборочные методы. Выборочный план должен соответствовать целям проводимого обследования и существующим ограничениям.
Достижение нужного объема выборки осуществляется в два этапа. Прежде всего устанавливается единица выборки, затем от этой единицы должна быть получена требуемая информация. Однако очевидно, что на ряд выбранных респондентов в силу тех или иных причин невозможно выйти и что не каждый выбранный респондент выразит желание отвечать на вопросы. Возникает проблема замены респондентов, которая может быть осуществлена с помощью трех методов: выбор следующего по списку респондента (например, следующий номер в телефонном справочнике), использование первоначальной выборки больших размеров и формирование повторной выборки. В последнем случае, если процент ответов оказался намного ниже, чем ожидалось, то контуры исходной выборки расширяются за счет дополнительных имен, найденных, скажем, случайным образом.
Переформирование выборки осуществляется тогда, когда проверка показала, что выборка не представляет совокупность в целом. В этом случае выбираются новые респонденты, и они добавляются к ранее использованной выборке, пока не достигается удовлетворительный уровень репрезентативности.
В реальности решение об объеме выборки является компромиссом между теоретическими предположениями о точности результатов обследования и возможностями их практической реализации; прежде всего имеются в виду затраты на проведение опроса.
На практике используется несколько подходов к определению объема выборки. Прежде всего опишем наиболее простые.
Произвольный подход основан на применении «правила большого пальца». Например, бездоказательно принимается, что для получения точных результатов выборка должна составлять 5% от совокупности. Данный подход является простым и легким в исполнении, однако не представляется возможным установить точность полученных с его помощью результатов. При достаточно большой совокупности он к тому же может быть и весьма дорогим.
Объем выборки может быть установлен исходя их неких заранее оговоренных условий. Скажем, заказчик маркетингового исследования знает, что при изучении общественного мнения выборка обычно составляет 1000– 1200 человек, поэтому он рекомендует исследователю придерживаться данной цифры.
В ряде случаев в качестве главного аргумента при определении объема выборки используется стоимость проведения обследования. Так, в бюджете маркетинговых исследований предусматриваются затраты на проведение определенных обследований, которые нельзя превышать. Очевидно, что ценность получаемой информации не принимается при этом в расчет. Однако в ряде случаев и малая выборка может дать достаточно точные результаты.
Объем выборки может определяться на основе статистического анализа. Этот подход основан на определении минимального объема выборки исходя из определенных требований к надежности и достоверности получаемых результатов. Он также используется при анализе полученных результатов для отдельных подгрупп, формируемых в составе выборки по полу, возрасту, уровню образования и т.п. Требования к надежности и точности результатов для отдельных подгрупп диктуют определенные требования к объему выборки в целом.
Наиболее теоретически обоснованный и корректный подход к определению объема выборки основан на расчете доверительных интервалов, в основе которых лежит ряд базовых понятий математической статистики (вариация, среднее квадратическое отклонение, доверительный интервал, средняя квад-ратическая ошибка (см., например, книгу [8]).
На основе этих понятий с учетом ряда предположений выводятся формулы расчета объема выборки. Все формулы для расчета объема выборки предполагают, что репрезентативность гарантируется путем использования корректных вероятностных процедур формирования выборки.