КРАТКОЕ ИЗЛОЖЕНИЕ. В этой главе мы обсуждали три эксперимента, которые не дублируют реальный мир, а «улучшают» его

В этой главе мы обсуждали три эксперимента, которые не дублируют реальный мир, а «улучшают» его. В первом эксперименте проверялась гипотеза о том, что при посадках самолета на постепенно поднимающуюся территорию у пилотов возникает зрительная иллюзия, и поэтому они снижаются слишком резко. Если проводить этот эксперимент в настоящих аэропортах, неизбежно систематическое смешение независимой переменной с различными побочными факторами. Применение тренажера, имитирующего реальный мир, позволило устранить это смешение.

Гипотеза второго эксперимента состояла в том, что при поисковых операциях на море наблюдение невооруженным глазом даст более эффективные результаты, чем наблюдение с биноклем. Если бы этот эксперимент проводился во время реальных спасательных операций, то за любой практически приемлемый юрок было бы собрано лишь небольшое количество данных. Надежность такого эксперимента была бы низкой. Благодаря использованию самодельных муляжей удалось за несколько недель провести эксперимент с достаточным числом проб, повысив тем самым его надежность. В третьем эксперименте сравнивалось качество работы с двумя высотомерами. Гипотеза была следующей: использование новой унифицированной шкалы позволит сократить количество грубых ошибок при определении высоты полета по сравнению со старой шкалой (циферблат с двумя стрелками). Если бы этот эксперимент проводился в реальном полете, то на успешность работы испытуемого с высотомером влияло бы множество побочных факторов. Полученные данные имели бы большой разброс, и это вновь, понизило бы надежность. Применение задачи по снятию показаний с фотографий обеих шкал в установленном темпе позволило значительно сократить несистематическую изменчивость экспериментальных данных.

Таким образом, в искусственных экспериментах можно повысить внутреннюю валидность. Описаны три способа улучшения реального мира, позволяющие это сделать возможным. Первый из них — устранение систематического смешения. Второй — возможность получить необходимое количество данных за более короткий срок и тем самым повысить надежность эксперимента. И третий — сократить несистематическую изменчивость данных и, следовательно, их разброс, что также обеспечивает более высокую надежность.

Но именно потому, что искусственные эксперименты не дублируют реальный мир, возникает вопрос об их внешней валидности. Достаточно ли успешно представлена в этих экспериментах реальность, чтобы можно было считать полученные результаты адекватными? Поскольку искусственные эксперименты ставятся в тех случаях, когда эксперименты с простым дублированием реального мира страдают недостатком внутренней валидности, сравнение с последними не может служить критерием их адекватности. Внешняя валидность трех описанных экспериментов оценивалась путем сравнения с другими (но также искусственными) приемами их проведения. Каждая из составных частей экспериментальной гипотезы: независимая, зависимая и дополнительные переменные — была проверен» нами на соответствие исследуемой реальности.

Достичь в эксперименте соответствия независимой переменной, как правило, довольно просто. Нужно только, чтобы вводимые условия были либо типичными для реальных ситуаций, либо вполне вероятными.

Соответствие зависимой переменной оценивалось по следующим трем пунктам.

Соответствует ли работа испытуемого в эксперименте его реальной деятельности?

Отражают ли измеряемые показатели наиболее важные аспекты этой деятельности?

Адекватен ли способ представления результатов измерений?

Самой важной проблемой оказывается здесь адекватный учет ошибочных ответов испытуемого, имеющих плюсовые и минусовые значения, как, например, переоценка и недооценка высоты полета. Чаще всего применяются два способа представления таких результатов. Один из них позволяет показать преимущественную направленность ошибочных ответов, а другой — определить величину их разброса.

В искусственных экспериментах возникают также вопросы о соответствии дополнительных переменных, стабильных по своему уровню. В целом ряде случаев такие переменные являются ключевыми, и их уровень должен соответствовать реальному миру. Нужно стараться также воспроизводить в эксперименте те дополнительные (по отношению к основной задаче) действия, которые в реальности выполняются одновременно с ней. Кроме того, следует выяснить, как скажется на внешней валидности искусственного эксперимента отсутствие эмоциональной напряженности (которая, как правило, характерна для соответствующих реальных ситуаций). И наконец, следует специально проанализировать последствия предъявления испытуемому всех экспериментальных проб за короткий (сжатый по сравнению с экспериментом, дублирующим реальность) период времени.

Но есть еще один вопрос — какова цена реализма? Каждый раз необходимо проверять, не слишком ли мы усердствуем, добиваясь в экспериментах как можно более точного воспроизведения реальности, и не страдает ли от этого их внутренняя валидность. Такая проверка также проведена путем сравнения с другими возможными приемами эксперимента. В заключение был затронут вопрос о финансовой стоимости искусственного эксперимента с максимальной имитацией реального мира. Иногда эта стоимость так высока, что реальным может оказаться в действительности менее реалистичный эксперимент.

ВОПРОСЫ

Почему эксперимент с ночными посадками самолета не мог быть проведен в настоящих аэропортах?

В чем состоит основное преимущество эксперимента со спасательным поиском?

Приведите пример эксперимента, дублирующего реальный мир, в котором имела бы место чрезмерная несистематическая изменчивость получаемых данных.

Перечислите, каким образом в экспериментах, «улучшающих» реальный мир, добиваются большей внутренней валидности, чем в экспериментах, дублирующих реальность.

Как вопрос о внешней валидности связан с вопросом о видах безупречного эксперимента, описанных в главе 2?

Что имеют в виду, говоря, что решение вопроса о соответствии эксперимента — это проверка соответствия основных составляющих экспериментальной гипотезы?

Приведите конкретные примеры соответствующих и несоответствующих способов получения данных для оценки значения зависимой переменной.

В связи с тем, что в искусственных экспериментах редко воспроизводятся стрессовые условия реальной жизни, можно ли сделать вывод, что они не могут быть соответствующими?

Почему проблема «реалистичности» эксперимента обсуждалась нами на примерах столь различных в этом отношении исследований, как спасательный поиск и сравнение высотомеров?