Квазиэксперименты на одной выборке

Эксперимент, но плану временных серий (план 7). Идея экспериментов, проводимых в соответствии с планом 7, состоит в осуществлении серии периодических замеров на одной группе с введением экспериментального воздействия посреди серии тестовых замеров по схеме:

Эксперимент по плану 7 применяется в ситуации, когда нет необходимости использовать контрольную выборку, например, при проведении лонгитюдного исследования особенностей межличностных отношений в коллективе, когда экспериментатор, осуществив ряд замеров показателей социально-психологического климата, проводит корректирующее воздействие или наблюдает влияние какого-либо события и затем опять измеряет необходимые показатели в группе.

На рис. 5.1 показаны результаты тестовых замеров четырех экспериментальных серий исследований А, 5, С и D.

Рис. 5.1. Графики тестовых замеров в ходе эксперимента

В случаях А и В наблюдается эффект воздействия, чего не скажешь относительно экспериментов С и D. Тенденция изменения переменных в эксперименте А имеет линейный характер. После экспериментального воздействия происходит резкий скачок. И эта же тенденция прослеживается на более высоком уровне. В эксперименте В наблюдается изменение параметров переменных только в период действия стимула. Затем продолжает действовать присутствующая раньше тенденция. Измеряемая тенденция в эксперименте С продолжает наблюдаться, несмотря на воздействие X. И, наконец, в случае D никакое экспериментальное воздействие не может обнаружиться, так как ни до, ни после него какая-либо тенденция не наблюдалась.

Рассмотрим анализ валидности эксперимента.

Фон: слабым местом эксперимента по плану 7 является отсутствие контроля фона. То есть объяснение эффекта возможно из-за воздействия фона, а не из-за влияния независимой переменной X, хотя активизация фона именно в момент введения независимой переменной маловероятна. К воздействиям фона обычно относят практически постоянное влияние константных и случайных переменных: погоды и времени года, сезонного изменения освещенности — или циклические факторы: недельные циклы труда, праздники, дни выдачи зарплаты, экзамены, отпуск, каникулы и т. п. Для снижения воздействия фона на испытуемых используется два основных метода: проведение эксперимента во все исследуемые периоды и осуществление экспериментальной изоляции исследуемых групп, т.с. организация лабораторного исследования.

Естественное развитие, эффект тестирования: подобно фону, естественное развитие и тестирование могут оказывать влияние на экспериментальные данные. Однако «скачок» в ситуациях А и В вряд ли можно отнести на счет фактора естественного развития или тестирования, так как он действует и на отрезке 0_{ — 0₄, и на отрезке 0₅ — ()₈. Видимо, фактор «естественное развитие» контролируется, так как в эксперименте осуществляется серийное тестирование.

Инструментальная погрешность: контролируется, если в серии обследований применяется однотипная тестовая процедура или аппаратура.

Факторы «статистическая регрессия, отбор испытуемых и отсев {выбывание)»: контролируются ввиду многократного тестирования одной и той же группы.

Факторы внешней валидности не могут полностью контролироваться ввиду «экспериментальной изоляции» и т. п. Естественно, что результаты эксперимента не всегда отражают процессы, происходящие в реальной популяции. Однако уровень этих погрешностей можно снизить путем привлечения репрезентативной выборки (по составу, качеству и численности испытуемых).

Таким образом, для повышения внешней валидности эксперимента, построенного по плану 7, и относительно достоверного выявления какойлибо тенденции или закономерности развития рассматриваемого психологического явления, видимо, его следует производить путем обобщения итогов подобных изысканий, проведенных разными исследователями, в различных условиях и на разных выборках.

Серии временных выборок (план 8). План 8 отличается тем, что для эксперимента, производящегося на одной выборке испытуемых, чередуются в случайном временном порядке или в упорядоченном режиме две эквивалентные ситуации в качестве экспериментального воздействия, в которых в первом случае воздействие имеет место (Xj), а во втором оно отсутствует (Х₀).

Реализация данного плана может осуществляться по схеме:

Схема эксперимента по плану 8 может иметь и иной вид:

Проведем анализ валидности эксперимента.

Фон: как относительно слабое место для плана 7, в схеме 8 контролируется благодаря предъявлению независимой переменной X в большом числе отдельных периодов эксперимента.

Остальные факторы контролируются подобно плану 7.

Реакция испытуемых на эксперимент: это слабое, уязвимое место плана 8, так как на экспериментальную группу оказывается не просто воздействие, а повторяющееся чередование однотипных воздействий независимой переменной. Относительная нейтрализация данного фактора осуществляется путем тщательного вкрапления экспериментальных воздействий в привычный режим жизнедеятельности испытуемых.

Взаимодействие состава групп и экспериментального воздействия: не контролируется. Есть ограничения в распространении результатов эксперимента на всю исследуемую популяцию, так как это — слабое место внешней валидности любого эксперимента, проводимого на одной выборке.

Статистическим методом проверки значимости экспериментального эффекта является метод сравнения средних значений при эквивалентных воздействиях на испытуемых при помощи статистических критериев (мер статистического вывода). Возможно применение и иных статистических сравнительных процедур (мер связи, дисперсионного анализа, исследования распределения данных и пр.).

Серии эквивалентных воздействий (план 9). Применение эквивалентного стимульного материала при повторной реализации X в эксперименте на одной группе требуется в том случае, когда эффект воздействия оказывается стойким. Для исключения привыкания испытуемых к условиям эксперимента и самому воздействию необходимо использовать неидентичный стимульный материал. В данном случае в ходе воздействия используются подобные процедуры или корректирующие схемы.

Пример. Если корректирующим воздействием являлся социально-психологический тренинг, то в разные моменты эксперимента проводятся различные тесты и упражнения на общение, которые по форме, отличаясь друг от друга, направлены на повышение качества коммуникации в группах испытуемых:

План 9 обладает внутренней валидностью подобно плану 8. Что же касается внешней валидности, то результаты эксперимента нередко имеют эффект только в отношении испытуемых, участвующих в данном эксперименте.

План 9 вызывает меньшую реакцию испытуемых на исследование ввиду разнородности применяемого стимульного материала и большей маскировки экспериментального воздействия X.^[1]

Уязвимость плана 9 обнаруживается в случае интерференции (наложения и взаимовлияния) экспериментальных воздействий даже в ситуациях с различным эквивалентным стимульным материалом.

Подводя итог краткого анализа квазиэкспериментальных планов экспериментов на одной группе, приведем пример лонгитюдного исследования личностно-профессионального развития старшеклассников, проведенного в Москве^[2].

Констатирующий эксперимент был построен с учетом режима работы данной организации. Задачей исследования являлось определение структуры и динамики личностнопрофессиональной направленности подростков в период обучения.

В ходе реализации целей констатирующего исследования модифицированный квазиэкспериментальный план 7 был применен, но следующей схеме:

где Х₂…;Х₃… — экспериментальное воздействие, которое оказывала система обучения и воспитания, формировавшее определенную личностно-профессиональную направленность личности учеников. В качестве экспериментального воздействия использовалась учебно-воспитательная система, сложившаяся в данной учебной организации. Таким образом, экспериментальное воздействие сливалось с фоном и естественным развитием подростков; О,; 0₂;0₅ — периодические психологические обследования обучающихся. Экспериментальная выборка была сформирована случайным образом и насчитывала 215 человек. Периодичность обследований показана в табл. 5.2.

Таблица 5.2

Краткая характеристика этапов психологического исследования.

Приведем обсуждение валидности эксперимента.

Фон и естественное развитие: контролировались полностью, являясь основными элементами экспериментального воздействия.

Эффект тестирования: нс полностью контролировался ввиду того, что обследуемые чувствовали себя в роли «подопытных кроликов» и заявляли об этом открыто. Эффект тестирования имел тенденцию к снижению ввиду привыкания обследуемых к процедуре тестирования по истечении годичного периода хода эксперимента.

Инструментальная погрешность: контролировалась полностью ввиду неоднократного использования профессиональной тестовой процедуры. Возможная погрешность корректировалась в процессе периодично построенного тестирования, что позволяло сравнивать промежуточные результаты исследования между собой и сопоставлять их с внешним критерием. В качестве внешнего критерия, но каждому показателю методик использовались экспертные оценки воспитателей и учителей данной образовательной организации, документы, характеризующие качество обучения и развития подростков (дневники, учебные журналы, записи воспитателей, личные карточки и личные дела), результаты собеседования с подростками, интервью с педагогами и родителями.

Статистическая регрессия и состав испытуемых: контролировались ввиду того, что экспериментальная выборка была сформирована случайным образом.

Выбывание или отсев испытуемых: контролировался. Количество 215 испытуемых было определено по окончательному числу участников последнего тестирования (0₅). На первом тестировании (0_{) присутствовало более 250 испытуемых. Результаты тестовых испытаний выбывающих по тем или иным причинам не учитывались при интерпретации результатов и расчете эффективности эксперимента.

Взаимодействие фактора отбора с естественным развитием и другими факторами: контролировалось полностью, так как отбор осуществлялся вероятностным способом, а также фон, естественное развитие являлись элементами экспериментального воздействия.

Источники внешней невалидности контролировались не полностью. Путем организации тестирования, не искажающего естественный ход учебно-воспитательного процесса, контролировалась возможность распространения экспериментальных результатов только на испытуемых учебных организаций данной типа. По количественным и качественным параметрам экспериментальная выборка была репрезентативна.

Таким образом, планы 7—9 отличаются от других квазиэкспериментов тем, что в экспериментальной процедуре не предполагается использование контрольных выборок. Эта ситуация возможна в случае отсутствия необходимости контроля эффекта воздействия независимой переменной на какой-либо стандартный объект. В психологии такая ситуация возникает довольно часто. По мнению некоторых авторитетных психологов, построение экспериментов, проводимых на одной выборке при неоднократном применении экспериментальных воздействий или психологических измерений, имеет право на существование. Так, например, при изучении стадий развития психики достаточно осуществить многократное измерение изучаемых психологических особенностей одного объекта. В данном случае обоснованно могут применяться схемы 7— 9, хотя исследователь должен помнить, что значительная часть источников невалидности не может находиться под полным контролем экспериментатора.

• [1] М обозначает конкретный стимульный материал, применяющийся в процессе экспериментального воздействия, причем стимульный материал Ма и Мс эквивалентен соответственно стимульному материалу Мь и Md.
• [2] 2 См.: Мощенко А. В., Носе И. II., Игнаткин В. II. Военно-профессиональная ориентациясуворовцев: в 2 ч. М.: Воениздат, 1992.