Методика разработки оценочных средств для промежуточной аттестации по профессиональным модулям, квалификационного (демонстрационного) экзамена итоговой аттестации

Оформление фонда оценочных средств для проверки освоения квалификации (или ее части) предполагает последовательное выполнение нескольких шагов.

1. На основе анализа связи и сопоставимости отдельных предметов оценивания (профессиональных и общих компетенций — ПК и О К) целесообразно объединить их в группы. Оценочные средства рассчитаны на комплексную проверку нескольких профессиональных или общих компетенций, профессиональных и общих компетенций одновременно. Следовательно, необходимо сгруппировать профессиональные и общие компетенции.

Приведем два примера такой хруппировки (на основании материалов ФГОС СПО):

Профессиональный модуль «Ввод и обработка цифровой информации».

ПК 1. Конвертировать файлы с цифровой информацией в различные форматы.

ПК 2. Обрабатывать аудиои визуальный контент средствами звуковых, графических и видеоредакторов.

ОК 2. Организовывать собственную деятельность, исходя из цели и способов ее достижения, определенных руководителем.

О К 3. Анализировать рабочую ситуацию, осуществлять текущий и итоговый контроль, оценку и коррекцию собственной деятельности, нести ответственность за результаты своей работы.

ОК 5. Использовать информационно-коммуникационные технологии в профессиональной деятельности.

Профессиональный модуль «Классное руководство»

ПК 1. Определять цели, задачи и планировать работу с родителями.

OK 2. Организовывать собственную деятельность, определять методы решения профессиональных задач, оценивать их эффективность и качество.

ОК. 4. Осуществлять поиск, анализ и оценку информации, необходимой для постановки и решения профессиональных задач, профессионального и личностного развития.

2. Определить объекты оценивания (те объекты, явления, процессы, продукты, которые являются результатом компетентных действий, «объективируют» компетенцию). Так, оценить компетенцию возможно через оценивание продукта деятельности, процесса деятельности, продукта и процесса одновременно.

Процесс оценивается, если:

• • необходимо проверить и оценить правильность применения инструментов, оборудования, соблюдение правил техники безопасности и т. д.;
• • значим временной фактор;
• • продукт (результаты) имеет отсроченный характер и (или) оценивается сложней, чем процесс.

Продукт деятельности оценивается при условии, что:

• • не важно, каким образом получен продукт, какие использованы методы (технологии);
• • сложно обеспечить процедуру наблюдения за процессом (например, выполняется умственная деятельность или он выполняется длительное время). В этом случае при необходимости оценка продукта деятельности может быть дополнена защитой (обоснованием).

Оценивание одного и того же объекта (продукта или процесса деятельности) может дать возможность оценить одну или сразу несколько компетенций, иногда — все компетенции. Оценка продукта и процесса деятельности позволяет в то же время оценить и готовность к применению профессионально значимой информации в ходе выполнения процесса (изготовления продукта).

• 3. Поскольку компетенции проявляются при выполнении профессиональных задач, трудовых функций, нужно установить условия проведения оценочной процедуры, которые обеспечат ее валидность и достоверность полученных в ходе проверки результатов. Оценочное средство должно содержать требования к профессиональной ситуации, которые актуализируют необходимую информацию, умения, профессионально значимые личностные качества. В процессе выполнения задания готовность должна перейти в реальное действие, в котором проявится понимание (знание), способы деятельности (умения и опыт), мотивация к осуществлению деятельности на высоком уровне (компетенции).
• 4. Выбор формы оценивания зависит от сложности предмета оценки. Оптимальной формой процедуры оценивания компетенций является очный (по принципу «здесь и сейчас», демонстрационный) экзамен, который предполагает моделирование (имитацию) ситуации профессиональной деятельности. Однако такая форма не всегда удобна при оценивании компетенций, которые требуют больших интеллектуальных, временных, финансовых затрат. В этом случае возможно проведение процедуры оценивания в заочной форме с использованием метода экспертной оценки портфолио (например, видеоматериалов).
• 5. Отбор показателей оценки результата и соответствующих им критериев целесообразно проводить с учетом информации о предметах, объектах оценивания, условиях выполнения того или иного задания, а также установленных форм и методов оценивания. Кроме того, на определение показателей и критериев влияют дополнительные факторы, приведенные ниже.

Показатель представляет собой формализованное описание оцениваемых основных (ключевых) параметров процесса (алгоритма) или результата деятельности (точность, полнота действий, время выполнения действий, качество полученного продукта и др.). Показатели отвечают на вопрос: что является свидетельством качества процесса или результата деятельности. В процессе оценивания компетенций нужно предусматривать комплексные показатели, исключающие механическое сложение результатов оценки отдельных знаний или умений. Следует помнить, что компетенция несводима к отдельному умению или знанию, значит, и показатели ее сформированное™ должны носить комплексный характер.

Критерий — признак, на основании которого проводится оценка по показателю, описание идеального состояния показателя.

Формулировка показателей и критериев осуществляется с учетом правил:

• • диагностичности;
• • малых чисел (оптимальное число показателей по каждому объекту оценки — три — пять);
• • преимущественного использования форм отглагольных существительных (выполнение, выбор, организация, расчет…).

Различают количественные критерии (фиксируют меру выраженности свойства) и качественные (фиксируют наличие определенного свойства). Количественные критерии устанавливают количественные требования к качеству процесса или результата деятельности: к скорости выполнения процесса, к допустимому объему затрат на выполнение процесса (получение результата) и т. п.

Качественные критерии уточняют требования к свойствам процесса или результата деятельности. Например, соответствие (оформления витрины, демонстрационных стендов, эстетической выкладки товара, цветового решения) содержанию и правилам (оформления торговых предложений); соответствие (опросных анкет по сбору количественной и качественной информации) целям и задачам (опроса); соответствие разработанного проекта программы дисциплины требованиям ФГОС, примерных программ; соблюдение требований к структуре при составлении простейших объявлений и т. п.

Если не существует общепринятых эталонов, на которые можно сослаться (например, ГОСТов), то, формулируя критерии качественных показателей, такие эталоны необходимо специально разработать для объективации процедуры оценивания (собственно, это и будет так называемый модельный ответ).

Особое внимание необходимо обратить на корректность формулировки показателей. Следует помнить, что компетенция несводима к отдельному умению или знанию, значит, и показатели ее сформированности должны носить комплексный характер.

• 6. Выбор типа задания осуществляется с учетом трех основных вариантов, адекватных задачам экзамена по профессиональному модулю:
  • • практическое задание;
  • • подготовка и защита проекта (исследования);
  • • подготовка и защита портфолио.

При проведении любых процедур оценивания требуется соблюдать педагогическую этику, уважительно относиться к личности студентов. Должно проводиться оценивание результатов их работы, а не самих студентов. В процессе текущего контроля недопустимы унижения, оскорбления в общении со студентами. Похвала, положительная оценка может быть озвучена в присутствии всей группы, ругать (не переходя в оскорбительный тон, указывая на низкий уровень результата работы, не касаться личности), высказывать неодобрение целесообразно наедине.

Во время промежуточной или итоговой аттестации важно снять психологические барьеры, волнение экзаменующихся. В спокойной деловой обстановке человек способен показать максимально высокий для себя результат, поэтому от экзаменаторов требуется создание непринужденной дружелюбной атмосферы во время квалификационных испытаний. В зарубежной практике с этой целью иногда используются формы скрытого экспертного наблюдения, запись видеоматериалов и т. д. при условии непротиворечивости этих форм специфике самой деятельности.

Важно, чтобы сам процесс обучения и текущее оценивание закономерно вели к готовности прохождения промежуточной и итоговой аттестации.

В немецкой практике экзаменационные задания прошлых лет выставляются в качестве образцов на сайте Центра разработки экзаменационных материалов. Эти задания можно использовать при подготовке к экзамену или в процессе обучения в качестве тренировочных. На сайте преподаватель (наставник) может выбрать задание и узнать информацию о нем, например, где задание было задействовано, степень его сложности и т. д.

Очевидно, что со временем в России сложится аналогичная практика. Деятельность Национального совета при Президенте Российской Федерации по профессиональным квалификациям, советов по профессиональным квалификациям (СПК) при организационно-методической поддержке со стороны Национального агентства развития квалификаций идет именно в этом направлении.

При тесном сотрудничестве предприятий и профессиональных образовательных организаций возможна реализация такого подхода непосредственно на данный момент.

В теории и методике профессионального образования и обучения существуют понятия «карга-задание», «письменный инструктаж», «инструкционная карта», «производственная карта». Они использовались в профессиональном образовании и обучении в 1970—1980;х гг., используются и в современной практике многих профессиональных образовательных организаций и отделов технического обучения, учебных центров предприятий.

Содержание таких материалов, опираясь на требования к результатам обучения, должно соответствовать содержанию и логике, принципам построения оценочных средств.

Карты-задания могут использоваться на разных этапах обучения: при объяснении нового, при закреплении материала, для домашнего задания, проведения контрольных самостоятельных работ. Уже на этапе объяснения можно использовать приемы мотивирующего и формирующего контроля, например, при объяснении новой операции попросить студентов составить алгоритм уже известной им (табл. 4.1).

Таблица 4.1

Пример карты-задания на этапе объяснения

Таблица сопоставления может быть подготовлена в тетрадях студентов, но по сути она является картой-заданием. Шаги алгоритма впоследствии могут стать основой разработки показателей оценки определенного задания. Заполнение правой и левой сторон таблицы происходит постепенно при параллельном разборе нового материала и контроле за повторением.

Другой пример.

Даны размеры цилиндрической детали с конусной частью. Общая длина детали L = 50 мм, длина конусной части / = 25 мм, диаметр большего основания D = 30 мм, диаметр меньшего основания d = 15 мм. Вычертить деталь.

К карте-заданию могут быть добавлены вопросы, например: Почему при цилиндрическом растачивании отверстие может получиться коническим? Почему получается грубая поверхность отверстия при чистовом растачивании?

Задания и вопросы в примере условны, их содержание может измениться при изменении технологий, оборудования. Важен сам принцип их построения — от реальной профессиональной деятельности с постепенным нарастанием уровня сложности.

В письменном инструктаже могут применяться инструкционные и производственные карты. Инструкционная карта описывает алгоритм выполнения трудовой операции, действия. Производственная дает полное представление о том, как выполняется целая ступень работы. На первых порах студенты могут работать с учебными инструкционными картами. Они предусматривают наиболее полную расшифровку всех элементов работы студента.

Карты включают алгоритм действий, указания по их выполнению, перечень необходимых инструментов и материалов, чертежи, эскизы или размеры, требования к контролю своих действий во время работы, критерии оценки продукта деятельности. По сути, это и есть текст задания, которое может получить студент во время промежуточной или итоговой аттестации с заданными показателями и критериями оценки.

В практике немецких коллег на экзаменах используется понятие «производственное (или межпроизводственное) задание». Производственное задание представляет собой комплексное задание, типичное для конкретного предприятия, куда в дальнейшем будет трудоустроен студент и где он обучался. Межпроизводственное задание — также комплексное задание, типичное для данной профессиональной деятельности, может выполняться на разных предприятиях отрасли.

Комплексность подразумевает проведение всех работ от планирования до самооценки, при этом также возможно устное собеседование о ходе выполнения задания.

В процессе обучения используются аналогичные задания, они называются «реальные» или «рабочие». Задания различают по степени сложности и месту выполнения — в училище, учебном центре, на предприятии. Это позволяет использовать такие задания с самого начала обучения. Среди реальных заданий различают «контрольное изделие» (может быть более простым, использоваться на начальной стадии обучения или более сложным — для последних лет обучения), «пробную работу» (типичная для профессии отдельная рабочая операция). Содержание контрольного задания или пробной работы, оформленное как инструкционная карта, может составлять основную часть сценария занятия.

Вопросы для самопроверки

• 1. Чем отличается контроль и оценка процесса от контроля и оценки результатов освоения профессиональной деятельности?
• 2. Как оценка может быть использована в качестве инструмента диагностики (анализа динамики освоения профессиональной деятельности), индивидуализации и корректирования процесса обучения?
• 3. Каким образом контроль может стать инструментом для достижения разных целей? Чем полезен контроль как инструмент достижения разных целей (мотивация деятельности; развитие конкуренции или взаимопомощи между обучающимися)? Каковы могут быть риски?
• 4. Какие существуют приемы педагогической поддержки обучающихся при проведении контрольно-оценочных мероприятий? Какие нормы педагогической этики необходимо соблюдать?
• 5. В чем заключаются современные подходы к контролю и оценке результатов освоения профессии (квалификации)? Какие смысловые акценты вносит принцип независимости оценки квалификации выпускников в деятельность мастера (наставника)?
• 6. Что необходимо знать о содержании и организации квалификационного экзамена?
• 7. Как разрабатываются оценочные средства для квалификационного экзамена? Могут ли и каким образом эти оценочные средства применяться в процессе обучения?