Квазиэксперименты с контрольными выборками

План с неэквивалентной контрольной группой (план 10). В психолого-педагогических исследованиях наибольшее распространение получил эксперимент, основанный на изучении экспериментального воздействия на материале неоднородных выборок по схеме:

Сутыо исследований данного типа является то, что экспериментальная и контрольная выборки подвергаются тестированию до и после экспериментального воздействия, причем экспериментальная и контрольная выборки неоднородны. В подобных исследованиях к участию в эксперименте привлекаются реальные группы людей, объединенные в трудовые или учебные коллективы.

Для проведения эксперимента субъективно подбираются две приблизительно одинаковые группы, которые нередко различаются по результатам предварительного тестирования. В данном случае эксперимент с контрольной группой (даже неэквивалентной) заметно снижает неоднозначность интерпретации результатов исследования и позволяет делать более корректные психологические выводы по сравнению с экспериментами, построенными по планам на одной выборке (Приложение 4).

Чем больше сходство параметров экспериментальной и контрольной групп, чем более это подтверждено предварительным тестированием, тем выше внутренняя валидность эксперимента. Безусловно, различия выборок по фону, естественному развитию, отношению к эксперименту и другим аспектам во многом воздействуют на интерпретацию результатов. Изменение данных после введения X может являться результатом различий и в условиях социализации испытуемых в той или иной группе, и условиях жизнедеятельности, и в бытовых условиях труда и пр. Вряд ли результаты эксперимента, проводимого в научно-исследовательских или проектных учреждениях, можно распространять на строительные организации, учеников школ, воспитанников интернатов и т. д.

Выходом из ситуации возможной невалидности исследований данного типа является процедура уравнивания выборок, участвующих в эксперименте, т.с. максимального приближения их к планам 4, 5, 6.

«Сбалансированные планы» (план 11). Под названием «сбалансированные планы» объединены «ротационные эксперименты», «перекрестные планы», «планы с переключением», в структуре которых для повышения точности результатов предусматривается предъявление испытуемым всех экспериментальных воздействий.

План 11 используется в условиях, когда при относительно малом числе естественных групп (например, количество классов в школе, групп в вузе, отделов в организации) есть возможность планировать порядок воздействий, но нельзя случайным образом разделить группы на эквивалентные подгруппы для экспериментального воздействия и измерения его последствий и влияний.

Для построения сбалансированного плана обычно используется схема «латинского квадрата»:

Для подтверждения гипотезы в эксперименте, построенном по плану 11, результаты измерений по столбцам и строкам сравниваются между собой при помощи статистических критериев. Положительным результатом является получение эмпирических данных, высвечивающих соответствующую тенденцию в каждой строке и выявляющих подобные изменения в каждом столбце, т. е. последствие X должно быть подобным во всех пробах в различных ситуациях и с различными испытуемыми. Вопросы могут возникнуть о степени подобия. Это обстоятельство предполагает корректное применение статистических процедур и методов.

Предварительное и итоговое тестирование на разных выборках (план 12). При изучении больших популяций для дифференцированного экспериментального воздействия — при относительно полном контроле источников невалидности эксперимента — применяется процедура рандомизации при распределении испытуемых по группам и режимам эксперимента. Стимулыюе воздействие осуществляется на одной выборке, которая подвергается также итоговому тестированию. Показатели же контрольной выборки оцениваются до воздействия. Мы можем до какого-либо события зафиксировать (например, теоретически или исторически) значимый фактор, определить его уровень влияния или развития в структуре личности или группы людей — причем этот фактор глобально влияет и присутствует в психологии масс или в психике определенной категории людей. Затем происходит (допустим) какое-либо событие (тоже касающееся массы народа), которое исследователь фиксирует в повторном измерении на иной выборке испытуемых. Результаты математически сопоставляются и интерпретируются.

«Дизайн» эксперимента в общем виде выглядит следующим образом^[1]:

Эксперименты, построенные по плану 12, могут иметь различный вид и часто осуществляются в социологических и объемных социально-психологических исследованиях. Преимущество его (даже над планами «истинных» экспериментов) заключается в высокой внешней валидности и возможности распространения результатов на изучаемую популяцию, так как итоговое тестирование производится на респондентах, не обремененных определенными лабораторными условностями, не привязанных к месту и ко времени экспериментальной ситуации и возможностью формирования репрезентативных выборок из заранее определенных популяций. Данный эксперимент позволяет оптимизировать перенос лабораторных методов в естественные условия.

Планы с контрольными выборками для предварительного и итогового тестирования (план 13). План 13 сходен с планом 10, за исключением того, что предварительное и итоговое тестирование проводится на разных лицах, благодаря чему исключается возможное взаимодействие тестирования и независимой переменной X:

Следует учитывать опасность для конкретной экспериментальной группы принятия за эффект X частной тенденции, фактически не связанной с экспериментальным воздействием. Однако и ее можно устранить, увеличивая число вовлекаемых в исследование изучаемых социальных объектов.

Множественные серии замеров (план 14). Следует заметить, что в схеме 14 экспериментальная и контрольная группы неэквивалентны. Осуществляется массированная регистрация эмпирических показателей до и после влияния на исследуемый объект независимой переменной X:

В структуре экспериментов, построенных по схеме 14, имеет место повышение достоверности результатов по сравнению с планами 7 и К) ввиду неоднократного тестирования. Эффект эксперимента определяется путем сравнения данных экспериментальной и контрольной групп и сопоставления результатов измерений до и после стимульного воздействия. По свидетельству Д. Кэмпбелла, это лучший квазиэкспериментальный дизайн из доступных планов в практике психолого-педагогических исследований^[2].

Наличие контрольных выборок в квазиэкспериментах значительно повышает достоверность их результатов. Даже если контрольные выборки неэквивалентны по отношению к экспериментальным группам, то они все же способствуют исследователю делать более конкретные сравнительные выводы о содержании (структуре) воздействия независимой переменной, что приближает подобные эксперименты к «истинным» экспериментальным схемам. В данной ситуации контролю подвергаются основные источники внутренней невалидности, а проблемной все же остается внешняя валидность исследования.

Реккурентный институциональный цикл («лоскутные» планы) (план 15). Схемы экспериментов 15 иногда именуются не планами квазиэкспериментов, а способами анализа данных. Они представляет собой по существу сопоставление совокупностей эмпирических результатов отдельных исследований на разных выборках. План 15 часто используется в ситуациях при отсутствии возможности экспериментатора проводить истинное исследование на реальной выборке с полным контролем основных параметров. План 15 является оптимальным вариантом квазиэксперимента, который в наибольшей степени приближается к истинному эксперименту. Данное исследование имеет следующий вид:

На первой выборке (класс А) осуществляется итоговое обследование последействия независимой переменной X. Вторая выборка (класс В) делится случайным образом (R) на подгруппы, которые обследуются по схеме: 1) «предварительное обследование» — «воздействие» — «итоговое обследование»; 2) «воздействие» — «итоговое обследование». Третья выборка (класс С) обследуется до воздействия, причем обследование выборок проводится в разное время, тем самым компенсируется воздействие фона и естественного развития.

Превосходство схемы анализа эмпирических данных 15 заключается в том, что эффект воздействия неоднократно проверяется в различных условиях и на разнообразных несовместных выборках испытуемых.

Формальная оценка верности гипотезы осуществляется в соответствии со схемой принятия решения по подтверждению эффекта независимой переменной Х_у которая приведена ниже: 0₂ < 0₅ < 0₄; 0₂ < 0₃; 0₂ < 0₄;

о₆ = о₇.

Примерами квазиэкспериментов по плану 15 могут служить эксперименты по разработке и апробации психологических методик.

Например, разработка методики «Технология психосемантического анализа — Семантический анализ деятельности» (ТПА-САД) в рамках исследования профориентации подростков (табл. 5.3), проведенного в 1988—1991 гг. по схеме:

Таблица 53

Экспериментальные данные.

При помощи t-критерия Стьюдснта были рассчитаны величины различий средних показателей тестов во всех сериях эксперимента.

Подтверждение гипотезы о возможности измерения профориентации подростков при помощи теста ТПА-САД могло состояться при отсутствии значимых различий между измерениями (оптимальной корреляции с внешним критерием R_xy = 0,65, р < 0,05), т. е. эмпирического доказательства относительного равенства О j = 0₂ = 0₃ = 0₄ при различных условиях эксперимента. В результате были выявлены значимые различия по t-критерию Стьюдента между парами выборок А, В и С, D на уровне р < 0,05. Сделан вывод о том, что критерии теста ТПА-САД применимы для оценки только выборок Ли В. Причем использование теста ТПА-САД для иных групп испытуемых требует пересмотра нормативов теста и обновления стимульного материала^[3].

Таким образом, технологии квазиэкспериментов дают возможность психологам оптимально спроектировать исследование, осознанно выбрав при этом соответствующий реальным условиям план и средства контроля факторов, влияющих на достоверность эмпирических данных.

«Истинные» экспериментальные схемы (4—6), о которых шла речь ранее, предполагают контроль всех (или, по крайней мере, большинства) источников невалидности эксперимента. Планы так называемых квазиэкспериментов, как и доэксиериментов, являются схемами подготовки к эксперименту или действий психологов-исследователей по адаптации эксперимента к реальной жизненной ситуации.

В практике психолога, работающего в реальных организациях, дои квазиэкспериментальная работа занимает важнейшее место. Суметь соединить вузовскую прикладную психологическую науку с реальной практикой, в которой много «подводных камней и рифов», является главной задачей психолога. Поэтому необходимо проявление «исследовательской смелости» в проведении экспериментальной работы, которая заключается в оптимальном выборе схем экспериментов в зависимости от реальных условий жизнедеятельности испытуемых и нейтрализации влияния источников их невалидности. В связи с этим изучение «экспериментального дизайна» не должно сводиться к зазубриванию готовых формул и структур. Оно есть лишь усвоение возможных направлений в построении и организации свободной, творческой, научной, экспериментальной психологической деятельности.

• [1] Знак X указывает, что экспериментальное воздействие на данную выборку может осуществляться или не осуществляться, что не влияет на ход и результаты исследования.
• [2] См.: Кэмпбелл Д. Указ. соч. С. 151.
• [3] Важной особенностью методики ТПА-САД является то, что для различных категорийиспытуемых разрабатываются разные стимульные задания с учетом психосемантическиххарактеристик стимульиых понятий и терминов в соответствии с концепцией Л. Постмена (Postman).