Анализ качества анкеты

Социологическая анкета, помимо всего прочего, — это еще текст, изложенный по определенным грамматическим и стилис­тическим нормам. При его составлении ученого интересует не только язык, но и речь (по Соссюру), в том числе интерпретация вербального материала говорящим и слушающим. Соответствен­но каждый вопрос представляет собой не только фрагмент или отрывок из анкетного текста, но также самостоятельную стилис­тическую конструкцию, подобно тому, как отдельный абзац на­учного или повествовательного текста представляет собой само­стоятельное целое (в рамках существующей стилистической кон­струкции всего текста), подчиняющееся собственным жанровым законам (зачин, интрига, заключение).

Анкета существует на узком пространстве между исследовате­лем и респондентом, тем, кто задает вопросы, и теми, кто на них отвечает. Как средство научного измерения и канал общения со­циологическая анкета должна в точности выполнять предписан­ные ей функции, обладая высокой надежностью и качеством. Ка­чество социологической анкеты определяется рядом факторов, в том числе тем, как мудро, проницательно и умело сформулиро­вал ее позиции разработчик, и тем, насколько адекватно его по­няли респонденты.

К изучению того, как воспринимают респонденты анкетные вопросы, специалисты применяют разнообразные техники. Обыч­но практикуются следующие методы: экспертные оценки разра­ботчиков анкеты; экспертные оценки интервьюеров; логический анализ анкеты; когнитивные методы анализа текста анкет⁶. При этом в основном тестируют лексическую или логическую правиль­ность вопросов (например, сбалансированность закрытий), их семантическое соответствие теме исследования. Кроме того, спе­циалисты обращают внимание на способы предъявления вопро­сов или карточек интервью, их понимание, проводят разграниче­ние письменного текста вопросника и воспроизведения его от­дельных элементов в устной речи и т.д.

Цель когнитивных методов — понять мыслительные процес­сы, управляющие ответами респондента при опросе, используя полученные знания для конструирования более эффективного опросного инструмента. Эмпирически удалось выяснить, что письменный вопрос и его произнесение — вслух анкетером (ин­тервьюером) или мысленно респондентом — две разные вещи. Не существует даже такой объективной формы, как дословное произнесение текста. В большинстве случаев оно представляет собой лишь устойчивый миф, укоренившийся в среде разработ­чиков анкет. Социолог читает респонденту одним образом, сам респондент — другим. При этом тот и другой в разное время могут прочитать, а соответственно, и понять один и тот же текст по-разному в зависимости от своего настроения, эмоциональ­ного и физического самочувствия, форс-мажорных обстоя­тельств и т.д. В конечном итоге с помощью когнитивного ана­лиза можно установить, что именно человек думает, отвечая на вопросы интервьюера. Здесь анкета трактуется не как бумаж­ный документ с записанным текстом, а как коммуникативная среда, в которой взаимодействуют: 1) содержание, направлен­ность и последовательность анкетных вопросов; 2) формулиров­ка вопроса и многообразие его интерпретаций; 3) характерис­тики и условия ситуации опроса; 4) личность интервьюера и респондента. При когнитивном анализе используются два ме­тода, направленных на уменьшение семантического многооб­разия слов и выражений: 1) улучшение формулировки вопроса и снятие неоднозначных понятий; 2) повышение качества ком­муникации между интервьюером и респондентом. По мнению Т. Димайо и Дж. Ротгеба, к первой группе относятся следую-346

щие техники: метод парафразы, метод артикулированного (про­говоренного) суждения, метод оценки уверенности в ответах и метод пробных вопросов⁷. Вторая группа включает: метод ког­нитивного кодирования, метод экспертных оценок, семантичес­кое кодирование вербального протокола, экспертное кодирова­ние вербального протокола и метод временных характеристик⁸. При этом первую группу методов называют качественными, а вторую количественными.

Методы когнитивного интервью направлены на вовлечение респондента в процесс тестирования вопросника: от респонден­тов требуется артикулировать свои размышления по поводу воп­роса и показать интервьюеру, как они понимают конкретный вопрос и формулируют на него ответ⁹. Метод парафразы заклю­чается в том, что респондента просят изложить услышанный вопрос, попытаться задать его самостоятельно, используя соб­ственные лексические конструкции. Метод оценки уверенности в ответе позволяет выявить трудности, связанные с формулиро­ванием ответа. Респондента просят оценить (например, по пя­тибалльной шкале) каждый ответ в зависимости от увереннос­ти, с которой он был выбран. С помощью метода артикулиро­ванного суждения можно установить, что говорит респондент о причинах выбора определенного варианта ответа. Для этого его либо просят проговаривать все мысли, которые приходят ему в голову при ответе на вопрос, либо ответить на дополнительные вопросы типа «почему»¹⁰.

Предложенная Д.М. Рогозиным" четырехшаговая схема ана­лиза когнитивного перехода (рис. 3.1) вскрывает лингвистические ресурсы (знания и речевые навыки), которые использует рес­пондент при ответе на анкетный вопрос. Различная когнитивная компетентность, которой обладают разные люди, заставляет их по-разному отвечать на прозвучавший вопрос. Но не только она влияет на качество получаемой информации. Не меньшее зна­чение имеют экстралингвистические факторы, в том числе мол­чание, кивки, ухмылка, движения руками, покачивание головой интервьюера.

Программный вопрос

Анкетный вопрос

Прозвучавший вопрос

Услышанный вопрос

Ответ на вопрос