Квалиметрическое обеспечение уровневой дифференциации в обучении студентов на основе таксономии учебных задач

Ориентация образовательных учреждений в контексте гуманистической парадигмы на новые цели требует вариативности образовательных систем и учебных заведений, гибкости и динамичности учебно-программной документации, ее прогностичности и адаптивности к изменяющимся условиям социально-экономической среды и индивидуальным интересам и способностям учащихся.

Обеспечение вариативности образовательных систем, как необходимое условие достижения нового качества образования в ходе реализации образовательной политики России, предполагает, что разработка и конструирование технологий обучения в значительной степени перемещается в конкретное учебное заведение, стимулируя творческую самостоятельность преподавателей в ходе создания и применения эффективных педагогических технологий.

Необходимость проведения образовательного мониторинга, оценки качества обучения при использовании педагогических технологий обусловили развитее квалитологии, образования, (комплексной, науки о качестве 4 образования), усиление интереса к определению критериев обученности и применению количественных методов оценки качества обучения (квалиметрии обучения).

Важнейшие документы, определяющие стратегию развития образования, такие как Национальная доктрина образования 2000 года, и принятая в декабре 2001 года Концепция модернизации образования до 2010 года, в качестве приоритетных мер по обеспечению качества образования предусматривают обоснование системы показателей, характеризующих уровень образованности обучаемых и эффективность образования, разработку объективных процедур и технологий оценки, обеспечивающих получение достоверных и сопоставимых данных, а также предоставление обществу объективной информации о достоинствах и недостатках конкретных звеньев образовательной системы.

Неразработанность эффективного и общепризнанного механизма контроля и оценки качества образовательных программ, учебного процесса и результата обучения является одним из существенных недостатков российской системы образования. «Отсутствие объективных критериев оценки знаний на индивидуальном, школьном и районном уровнях приводит к тому, что. уровень образования представляет собой недостаточный, суррогатный индикатор знаний, измеряющий только количественные достижения и часто скрывающий различия в уровне знаний учащихся или качественные измерения во времени» (26, с.16).

Среди проблем обеспечения мониторинга качества обучения можно выделить следующие: не разработаны общие подходы к форме предъявления требований, предъявляемых обучаемымформулировки требований неоднозначны- «.структура требований стандарта (разделение по содержательным линиям без структурирования по видам учебной деятельности) сильно затрудняет разработку измерителей, позволяющих оценить не только номенклатурное усвоение минимального содержания образования, но и уровень интеллектуальных умений, сформированный в процессе усвоения» (44, с.89). 1 '.

Использование количественных измерителей качества обучения может способствовать преодолению противоречия между растущей вариативностью образования и его стандартизациейразработка и совершенствование оценочных шкал могут выполнять функцию разумной стандартизации целей образования, придания им свойств диагностичности и проверяемости (44).

В отечественной и зарубежной педагогике накоплен обширный научный фонд, который создает предпосылки определения количественных измерителей для обеспечения мониторинга качества обучения: разработаны философские и методологические основы квалитологии образования (Поташник М.М., СубеттоА.И. и др.), выделены критерии оценки качества образования (Гершунский Б.С., Поташник М. М. и др.), оценки качества обучения (Гальперин П.Я., Гузеев В. В., Кальней В. А., Маркова А. К., Полонский В. М.,.

Талызина Н.Ф., Шишов С. Е. и др.), описано применение статистических методов в педагогике (Бабанский Ю.К., Беспалько В. П., Грабарь М. Н., Ительсон Л. Б., Рабунский Е. С. и др.), предложены модели образовательного мониторинга (Алексеева О.Ф., Ковалева Г. С., Краморенко И. С., Матрос Д. Ш., Мельникова Н. Н., Сельская Н. С., Полев Д. М. и др.), проведен анализ оценочных шкал (Гузеев В.В., Чошанов М. А. и др.), разработаны квалиметрические таксономии (Блум Б., Герлах В., Де Блокк А., Мадэс Г., Салливан А., Толлингерова Д. и др.).

Вместе с тем, анализ литературы дает основание сформулировать ряд противоречий, требующих дальнейшего углубленного изучения, между:

— гуманистической ориентацией процесса обучения, предполагающей учет индивидуальных способностей и склонностей обучаемого, и необходимостью оценки качества обучения путем сравнения с единым образовательным стандартом;

— пятибалльной шкалой оценки знаний и вариативностью учебных программ,.

— необходимостью мониторинга качества обучения и отсутствием комплексной тщательной технологической проработанности количественной оценки качества обучения на содержательно-целевом, организационно-деятельностном и контрольно-оценочном уровнях.

Потребность в теоретическом обосновании выбора и экспериментальной проверке эффективности использования количественных измерителей качества обучения, обеспечивающих дифференцированный подход в обучении и создание на этой основе педагогических технологий определили выбор темы настоящего исследования: «Квалиметрическое обеспечение уровневой дифференциации в обучении студентов на основе таксономии учебных задач».

Цель исследования: разработать и экспериментально проверить модель квалиметрического обеспечения уровневой дифференциации в обучении студентов на основе таксономии учебных задач, выявить педагогические условия эффективного функционирования этой модели.

Объект исследования: квалиметрическое обеспечение процесса обучения в вузе (колледже).

Предмет исследования: квалиметрическое обеспечение технологии уровневой дифференциации на основе таксономии учебных задач в вузе (колледже).

В основу исследования положена следующая гипотеза: эффективность организации дифференцированного обучения и объективность оценки его результатов существенно повысится, если.

— задача квалиметрического обеспечения учебного процесса будет изначально интегрирована в общую систему его проектирования, организации и оценки результатов;

— в основу квалиметрического обеспечения учебного процесса будет положена таксономия учебных задач, как элемент содержания обучения, система критериев обученности и механизм ее оценки;

— будет разработана и экспериментально обоснована технология уровневой дифференциации обучения на основе таксономии учебных задач.

Объект, предмет, цель и гипотеза исследования обусловили задачи исследования:

1. актуализировать проблему педагогической квалиметрии при проектировании и организации процесса обучения;

2. исследовать генезис и раскрыть содержание следующих понятий: педагогическая квалиметрия, таксономия учебных задач, технологии обучения, технология уровневой дифференциации;

3. выявить возможности таксономии учебных задач как механизма проектирования и оценки процесса обучения в условиях технологии уровневой дифференциации;

4. выявить и обосновать организационно-педагогические условия применения разработанной технологии для организации обучения студентов.

Теоретико-методологической основой исследования являются: системно-деятельностный подход к анализу и проектированию процесса обучения (Загвязинский В.И., Краевский В. В., Лернер П. Я., Скаткин М. Н., Сластенин В.А.) — основные положения квалиметрии образования (Поташник М.М., Субетто А.И.) — теория индивидуализации и дифференциации обучения (Гальперин П.Я., Давыдов В. В, Рабунский Е. С., Унт И. Э., Челноков В. А., Фирсов В.В.) — таксономический подход к проектированию процесса обучения (Блум Б., Голоушова Д., Ляудис В. Я., Полонский В. М., Толлингерова Д.) — семантико-генетический подход к анализу содержания понятия «педагогическая технология» (Левитес Д.Г.) — психолого-педагогические основы обучения студентов (Бокуть Б.В., Вербицкий А. А., Пидкасистый П. И., Харламов И.Ф.).

Для решения поставленных задач и проверки гипотезы был использован комплекс методов исследования. Теоретический анализ научной литературы по теме исследования способствовал выбору теоретико-методологических оснований экспериментальной работы. Основным методом исследования был педагогический эксперимент, в ходе которого изучались продукты учебной деятельности студентов (дипломные работы и отчеты по практике). Проектирование технологии организации и мониторинга процесса обучения на основе таксономии учебных задач проводилось в ходе изучения теоретической литературы, бесед с экспертами и обобщения их опыта, анализа отчетной документации. Результаты эксперимента анализировались в ходе педагогического консилиума, а также с помощью математической статистики подвергались компьютерной обработке.

Базой исследования явились Мурманский морской рыбопромышленный колледж им. И. И. Месяцева и Мурманский гуманитарный институт (студенты старших курсов).

На защиту выносятся следующие положения: 1) Модель проектирования, организации и оценки качества обучения в условиях уровневой дифференциации на основе таксономии учебных задач включает учебные задачи различной когнитивной сложности как критерии оценки качества обучения, механизм оценки его результатов и условия организации процесса обучения.

2) Эффективность использования технологии уровневой дифференциации в педагогической практике может быть существенно повышена, если в ее основе лежит таксономия учебных задач. Интеграция технологии уровневой дифференциации и таксономии учебных задач позволяет преподавателям разрабатывать авторские таксономии, отражающие личный опыт, предпочтения и стиль преподавания, но обеспечивающие сопоставимость результатов обучения при мониторинге качества обучения.

3) Системно-целостный подход к реализации квалиметрического обеспечения учебно-организационного процесса позволяет решить проблему стандартизации результатов обучения в условиях растущей вариативности образования путем разработки и использования критериев оценки качества обучения на основе таксономии учебных задач при проектировании, организации и оценке результатов обучения.

Научная новизна и теоретическое значение исследования заключается в том, что.

— теоретически обоснована необходимость и принципиальная возможность интеграции идей дифференцированного подхода в обучении и таксономии учебных задач при проектировании и организации процесса обучения;

— разработана модель квалиметрического обеспечения учебного процесса на основе таксономии учебных задач в условиях уровневой дифференциации;

— на основе созданной модели разработана и экспериментально апробирована технология проектирования, организации процесса обучения, доказана ее эффективность как в развитии мотивации учения, так и в повышении объективности оценки и самооценки его результатов.

Практическая значимость работы определяется тем, что разработана и апробирована система работы преподавателя вуза (колледжа) по рефлексии, осмыслению и анализу проблемы квалиметрического обеспечения учебного процессаразработаны и внедрены в практику профессионального обучения система квалиметрического обеспечения технологии уровневой дифференциации на основе таксономии учебных задач, включающая методические рекомендации по проектированию, организации и оценке качества результатов обучения студентов в ходе написания курсовых, дипломных работ и отчетов по производственной практике (что отражено в 7 публикациях). ф Достоверность и обоснованность научных результатов обеспечены применением совокупности методов исследования, адекватных предмету, цели и логике исследования, методологической обоснованностью исходных теоретических положений, репрезентативностью выборки исследования, тщательностью проведения трех серий эксперимента (80 студентов старших курсов).

Апробация и внедрение результатов настоящего исследования осуществлялось в Мурманском морском рыбопромышленном колледже им.

И И. И. Месяцева (1999;2000 гг.) и Мурманском гуманитарном институте (2000.

2001 гг.). Основные положения и выводы диссертации обсуждались на научно-практических конференциях в МГПИ (1999, 2000, 2001 гг.), ММРК им. И. И. Месяцева (2000 г.), МГТУ (2000 г.), на кафедре психологии МГИ (2001 г.), кафедре общей педагогики МГПИ.

Структура диссертации. Работа состоит из введения, двух глав (7-и параграфов), заключения, библиографии, 6-и приложений, 15-и диаграмм, 13-и таблиц и 3-х схем.

Выводы:

0 В ходе исследования при разработке критериев оценки производственной практики студентов-техников и дипломных работ студентов-психологов была доказана принципиальная возможность диагностичного количественного представления планируемых результатов обучения студентов по техническим и гуманитарным дисциплинам как уровней усвоения учебного материала, отличающихся по когнитивной трудности.

Педагогический эксперимент, проведенный адекватно процедуре констатирующей диагностики, подтвердил эффективность разработанной ^ модели квалиметрического обеспечения технологии уровневой дифференциации на основе таксономии учебных задач: когнитивная сложность учебных задач, выбираемых студентами значительно возросла, что говорит о росте качества обучения и мотивации студентов.

Несколько этапов исследования наглядно показали значимость системно-целостного подхода к использованию квалиметрического обеспечения во всех технологических компонентах — содержательно-целевом, контрольно-оценочном и организационно-деятельностном. 1.

ЗАКЛЮЧЕНИЕ

.

Корректность применения математических методов во многом зависит от точности и надежности используемых измерителей, поэтому в настоящее время для обеспечения мониторинга качества обучения, как систематического и стандартизированного наблюдения за процессом качественных и количественных изменений, появилась необходимость интеграции этих направлений педагогической квалиметрии с целью разработки инструмента, позволяющего выявить и дать не только качественную характеристику качества обучения студента, но и адекватно выразить его количественно.

Это обусловило появление в последние десятилетия исследований по квалиметрии образования (теории оценки и измерения качества образования), как части квалитологии образования (науки о качестве образования во всем ее многообразии (качестве функционирования и развития образовательных систем, качестве учебного процесса, обучающихся, качестве профессиональной подготовки преподавательского состава)).

В работе выделены три основных направления поиска решения проблемы оценки качества обученияразвитие личности, характеристика процесса обучения и достижение полного усвоения эталона результата обучения.

Считая обученность показателем качества обучения, в диссертации актуализирована проблема формулирования критериев обученности как проблема описания эталонов усвоения для задач высокой когнитивной сложности.

Ретроспективный анализ научной литературы и изучение опыта работы преподавателей позволили определиться с собственной интерпретацией проблемы. Качество обучения измеряется когнитивной сложностью решаемых учащимися учебных заданий, как абсолютной оценочной шкалы, на основании которой определяется соответствие знаний определенной отметке, и как относительной шкалы, позволяющей сравнить результаты обучения студента с его предыдущими достижениями. Когнитивная сложность учебной задачи, выполненная учащимся, позволяет также определить вид ориентировочной деятельности и психологический механизм, который он использовал в процессе обучения. При выделении типов учебных заданий различной когнитивной сложности различными авторами обычно используется таксономический подход. Это позволяет гипотетически предположить возможность использования таксономии учебных задач как содержательной основы квалиметрического обеспечения мониторинга качества обучения.

Теоретический анализ проблемы соотнесения когнитивной сложности учебных задач с пятибалльной шкалой оценки и тремя уровнями усвоения учебного материала позволил сделать вывод о том, что использование трех-, пятибалльных шкал не может однозначно и диагностично задать уровень требований, а следовательно, снижает объективность оценки качества обучения.

В ракурсе проблемы исследования были гипотетически выделены характеристики квалиметрического обеспечения мониторинга качества обучения как шкалы оценок, построенной на основе детально разработанной таксономии учебных задач.

Рассматривая эволюцию таксономического подхода, можно отметить, что таксономии учебных целей первоначально разрабатывались с опорой на иерархию внутренних целей ученика, на внешние процедуры, которые должен выполнять учащийся в ходе учебного процесса, на уровни содержания обучения, преподавания, учения, на виды представления знаний, продукты интеллектуальной деятельности, мыслительные операции ученика. Изучение таксономии учебных целей Гилфорда Дж., Де Блокка А. выявило противоречие между их детальной разработкой и большими временными затратами для практического применения учителями, таксономия Блума Б., Мадэса Г. отражает внутренние цели ученика, но не ориентирована на формирование умений решать задачи.

Возникшие противоречия и проблемы таксономического подхода в обучении были, в определенной степени, решены в работе Д. Толлингеровой, которая разработала таксономию учебных задач, состоящую из 5 категорий и 27 типов задач, упорядоченных по когнитивной сложности. Использование таксономии позволяет технологично обеспечить достижение целей обучения, поставленных преподавателем, на этапе проектирования процесса обучениятаксономия Ш является инструментом опережающего управления процессом развития познавательной деятельности учащихся, индивидуализации обучения.

Полнота и детальная разработанность таксономии учебных задач, а также то обстоятельство, что задания в ней упорядочены по когнитивной сложности и сопоставлены с количественным показателем (тип задачи) позволили выдвинуть гипотезу о возможности использования этой таксономии как оценочной шкалы. Была выдвинута и обоснована гипотеза о том, что такая оценочная шкала применима не только на этапе проектирования учебных задач, но и при организации и оценке результатов процесса обучения.

В диссертации дается авторское понимание причин того, что использование таксономий не получило широкого распространения в практике обучения в образовательных учреждениях России — недостаточная проработанность технологии оценки качества обучения, трудоемкость разработки множества учебных задач различной когнитивной сложности по каждой изучаемой теме при индивидуальном подходе.

Сопоставление категорий таксономии и пятибалльной шкалы оценок ^ упрощает процедуру таксации и оценки результатов обучения, но снижает возможность статистического анализа когнитивной сложности решаемых учениками задач как показателя качества обучения. Поэтому в диссертации выдвигается рабочая гипотеза о повышении качества обучения и эффективности его мониторинга при использовании таксономии учебных задач в развернутом виде.

В контексте решения проблемы повышения эффективности применения * таксономии учебных задач как квалиметрического обеспечения процесса обучения, в работе проводится анализ возможности ее использования как средства не индивидуального, а дифференцированного обучения. В ракурсе этой проблемы проводится семантический анализ понятий индивидуальный и дифференцированный подход, дифференциация обучения, обобщаются критерии и цели дифференциации.

Ретроспективный анализ литературы позволяет сделать вывод, что квалиметрическое обеспечение уровневой дифференциации не только менее трудоемко, чем проектирование индивидуальной траектории обучения, но и имеет ряд преимуществ: выбор учебных заданий, совершаемый учеником, не только упрощает работу учителя, но отражает познавательные интересы и склонности обучаемого, открытое предъявление требований к уровню усвоения учебного материала стимулирует развитие самоконтроля, самооценки у обучаемого.

В соответствии с гипотезой в диссертации обосновывается принципиально важный тезис: интеграция технологии уровневой дифференциации и таксономии учебных задач помогает эффективно использовать таксономию как квалиметрическое обеспечение мониторинга качества обучения, а также позволяет преподавателям разрабатывать авторские таксономии, отражающие личный опыт, предпочтения и стиль преподавания, но обеспечивающие сопоставимость результатов обучения при мониторинге качества обучения.

Квалиметрическое обеспечение рассматривается в диссертации как неотъемлемая часть педагогических технологий. В этом контексте в исследовании предложен механизм интеграции таксономии учебных задач и технологии уровневой дифференциации и сформулированы основные направления таксономического структурирования технологии уровневой дифференциации на основе таксономии учебных задач.

Этот механизм состоит в следующем: при проектировании учебных задач производится их таксация, то есть сопоставление с количественным показателем — типом задачиопределение уровня требований происходит не только путем описания типов задач, которые необходимо решить обучаемому, но и количественно с помощью суммативной оценки и среднего значения когнитивной сложности учебных задач для каждого уровня усвоенияпри организации процесса обучения система учебных задач для каждого уровня усвоения представляется обучаемым в качестве критериев оценки результатов обученияна контрольно-оценочном этапе качество обучения определяется количественно как тип задачи по таксономии и сравнивается с установленной на этапе проектирования суммативной оценкой когнитивной сложности учебных задач для различных уровней усвоения. Критериями усвоения контролируется соответствие разрабатываемой системы планируемым результатам обучения.

В ходе исследования при разработке критериев оценки производственной практики студентов-техников и дипломных работ студентов-психологов доказана принципиальная возможность диагностичного количественного представления планируемых результатов обучения по техническим и гуманитарным дисциплинам как уровней усвоения учебного материала, отличающихся по когнитивной трудности.

Разработан механизм таксономического структурирования учебного материала, который включает несколько этапов: представление содержания учебного материала в виде учебных заданий, последовательное выполнение которых направлено на достижение планируемых результатовопределение экспертным методом в баллах таксономии трех уровней когнитивной сложности каждой учебной задачи, которые соответствуют отметкам «3», «4» и «5" — разработка оценочной шкалы, которая показывает, сколько баллов таксономии за выполнение всех учебных заданий соответствуют оценкам по пятибалльной шкалестатистический анализ качества разработанной оценочной шкалы — диагностичность, значимость различия трех уровней усвоения, что необходимо для повышения объективности процедуры оценки знаний.

Экспериментально была доказана эффективность разработанной модели квалиметрического обеспечения таксономии учебных задач, поскольку в ходе трех этапов исследования в результате формирующего эксперимента значительно увеличивалась когнитивная сложность решаемых студентами учебных задач, что говорит о росте качества обучения. Оценка работ студентов разными преподавателями совпадает в большей мере (а значит менее субъективна), если они оценивали не эмпирически, а использовали таксономию, в которой заданы требования к студентам и планируемые результаты.

Несколько этапов исследования наглядно показали значимость системно-целостного подхода к использованию квалиметрического обеспечения во всех технологических компонентах — содержательно-целевом, оценочно-результативном, организационно-деятельностном, контрольно-управленческом.

В ходе проверки эффективности разработанного квалиметрического обеспечения были сделаны попытки применения его на разных этапах процесса обучения:

— только при проверке знаний;

— в ходе обучения ориентировать студентов на разработанные критерии, а оценку знаний проводить без использования таксономии;

— представлять преподавателям готовую таксономию, чтобы они применяли ее при организации учебного процесса и оценке знаний, но не проектировали уровни усвоения знаний, умений и навыков.

Данные эксперимента наглядно показали, что системно-целостный подход к проектированию и использованию квалиметрического обеспечения является необходимым условием его эффективности.

На основании анализа результатов опытно-экспериментальной работы были сделаны выводы, выходившие за рамки поставленных задач: 1. Самостоятельный выбор студентами уровня усвоения учебного материала, в соответствии с их способностями и склонностями, обеспечивает одновременно проведение педагогической диагностики, реализацию дифференцированного подхода в обучении, формирование у студентов навыков самоконтроля и самооценки, при условии, что студенты заранее поставлены в известность о критериях оценки и текущий контроль проводится с использованием таксономии.

2. Разработка преподавателями квалиметрического обеспечения процесса обучения, становясь предметом рефлексивного анализа, помогают более грамотно определять цели, содержание обучения, уровень требований к студентам, критерии оценки на уровне учебных предметов. Интеграция технологии уровневой дифференциации и таксономии учебных задач позволяет преподавателям разрабатывать авторские таксономии, отражающие личный опыт, предпочтения и стиль преподавания, но обеспечивающие сопоставимость результатов обучения при мониторинге качества обучения.

Интеграция технологии уровневой дифференциации и таксономии учебных задач позволила эффективно использовать их преимущества и определила организационно-педагогические условия их применения:

— Студентам должны заранее представляться три уровня сложности учебных заданий с описанием критериев оценки;

— Студенты самостоятельно выбирают уровень усвоения каждой темы учебного материала;

— При текущем и итоговом контроле качества результата обучения должны проводиться расчеты среднего значения и суммы баллов по таксономии, на основании которых определяться соответствующая оценка;

— Применение таксономии учебных задач при текущем контроле является необходимым условием для решения главной задачи — развития рефлексивных способностей и мотивации студента;

— При разработке оценочной шкалы на основе таксономии важно, чтобы преподаватели, которые будут с ней работать, активно участвовали в ее разработке, с целью выработки единых требований к студентам, обеспечения однозначной трактовки критериев оценки, что важно для проведения мониторинга качества обучения в вузе.

Проведенное исследование подтвердило гипотезу о повышении эффективности организации дифференцированного обучения и объективности оценки его результатов на основе таксономии учебных задач. В то же время оно не исчерпывает проблемы квалиметрического обеспечения процесса обучения студентов вуза (колледжа), а указывает перспективы дальнейшего исследования:

— использование разработанной модели квалиметрического обеспечения не только для производственной практики и дипломного проектирования, но и в ходе освоения студентами учебных предметов;

— изучение возможности применения таксономии учебных задач для организации групповой работы, при использовании технологии проблемно-модульного обучения, проектного обучения, учебного исследования;

— выявление организационно-педагогических условий системно-целостного применения таксономии учебных задач как основы квалиметрического обеспечения всего учебного процесса, а не только отдельных предметов, обеспечения комплексного мониторинга качества обучения;

— определение особенностей квалиметрического обеспечения процесса обучения учащихся старших классов школ и в системе последипломного образования.

II.