Методологические основы тестирования владения иностранным языком

Доцимология и история систем сертификации владения итальянским языком как иностранным

СОДЕРЖАНИЕ ОЦЕНКИ — Любая оценка учебной способности или достижений учащегося является сложным процессом, соединяющим множество элементов, редко отделяемых друг от друга. Бенедетто Вертекки, профессор экспериментальной педагогики в университете Рома Тре, предлагает группировать факторы, влияющие на формирование школьных оценок, в трех категориях: элементы, касающиеся обучения, эмоционально-реляционные факторы, и социо-психологические особенности учащихся, не связанные со школой (какие). Вышеуказанное деление позволяет, с одной стороны, способствовать связи между оценкой и остальными характеристиками дидактической деятельности, с другой, улавливать некоторые важные следствия, касающиеся особенно социального и культурного аспекта оценки и характерные для процесса ее формирования.

Среди элементов, относящихся к обучению, Вертекки включает качество и количество приобретённых знаний, умение выразить с точностью изученный материал и умение применять свои компетенции в знакомых и в новых коммуникативных ситуациях. К эмоционально-реляционным факторам, влияющим на формирование оценки, относятся желание учащегося активно участвовать в учебной деятельности, соответствие его поведения к ожиданиям учителей и его отношения к учебной обстановке. Большую роль в оценки играют также элементы, отражающие интеллектуальные, эмоциональные и социальные особенности учащегося, не связанные с образовательной средой. Чаще всего, данная категория особенностей имплицитно осознается учителем, например, благодаря наблюдению внешних признаков учащегося, в частности, его поведение в классе, неряшливость или опрятность в одежде и другие элементы, свидетельствующие о качестве его жизни.

Схема 1. Содержание оценки [Vertecchi, 1984:13].

При составлении оценки эти факторы могут по-разному сочетаться, способствуя неоднородности и непостоянству качества оценки. Помимо этого, Вертекки подчеркивает, что преобладание одной группы факторов над другими является ключевым моментом для выявления основных направлений образовательного процесса.

ДОЦИМОЛОГИЯ — Дисциплина, впервые поднявшая вопросы оценки на научный уровень в Италии, была доцимология, корни которой — в философских исследованиях позитивизма, во французской прикладной психологии конца XIX века (Фрэнсис Гальтон, Альфред Бине) и в структурной лингвистике. Первоначально вопросы, поднятые доцимологией, касались недостатка объективности и нецелесообразности школьных оценок. Впоследствии, однако, в рамках политических и социальных дебатов об осуществлении «идеального общества», где каждый человек мог бы реализовать свои способности в выбранной профессии, тема профессиональной ориентации войдёт в центр французской и итальянской политической дискуссии первой половины XX века.

Стремление к достижению более справедливого общества, в том числе, посредством признания права каждого гражданина выбирать самую подходящую профессию, сделает крайне актуальными вопросы, озвученные доцимологией. Её вклад в развитие психологии, социологии, статистики, методики и тестологии заслуживает больше внимания. Таким образом, целесообразно начать исследование с описания истории сертификации в Италии и Франции, поскольку они похожи во многих характеристиках, которые их отделяют от остальных (англоязычных, русскоязычных), начиная уже с самого названия дисциплины, доцимология. Разница между доцимологией и тестологией имеет не только формальный характер. За термином «доцимология» стоят независимые школы, гордящиеся своими корнями и не желающие смешиваться с другими, в настоящий момент господствующими, течениями, известными под термином «тестология». Что касается возникновения доцимологии в Италии, её основные принципы очень долго не отличались от озвученных французскими учеными.

Этимология термина и область его применения — Согласно Гвидо Бенвенуто, профессор экспериментальной педагогики в университете Рома Сапиенца, исходное значение термина «доцимология» обнаруживается в связи с греческими словами «докимасия» (дпкймбуЯб, тест или экзамен) и «логия» (лпгйб от лпгпт, речь, но также научной рефлексии). В подтверждение данной гипотезы Бенвенуто утверждает, что в древней Греции называли «докимасией» тот экзамен, который обязан был пройти гражданин, избранный голосованием или по жребию, с целью проверки, владел ли он компетенциями, необходимыми для занятия местной магистратуры.

По мнению итальянского педагога Марио Гаттулло авторство термина «доцимологии» признаётся за Анри Пьерон (1881−1964), французский психолог и один из основоположников французской экспериментальной психологии. Название доцимологии «фактически принимается учёными ряда европейских стран (например, Франция, Бельгия, Италия) для того, чтобы указать область педагогических исследований, которая занимается проблемами школьной оценки». [Gattullo, 1978: 315−316]. С целью предоставления недвусмысленного определения термина Гаттулло считает целесообразным уточнить два важных вопроса. Во-первых, подчеркнуть, что в англосаксонских странах для обозначения того же сектора исследований учеными принято использовать выражения Educational Measurement and Evaluation. Во-вторых, уточнить, что цели науки доцимологии в области школьной проверки классифицируются, главным образом, как технико-дидактические (касающиеся, например, объективности и других характеристик приёмов оценки) и как политико-педагогические (здесь речь идёт, например, о содержании и целях применения оценки). По мнению Гаттулло, доцимология в собственном смысле занимается только технико-дидактическими целями.

Луиза Сантелли Беччегато, профессор истории педагогики в университете г. Бари, также придерживается мнения Гаттулло, когда утверждает, что в англо-американской научной литературе не находим термин, аналогичный доцимологии, а скорее широкий спектр указаний, используемых для определения ее предметов или функций. Среди английских терминов, Сантелли Беччегато озвучивает educational evaluation для сопоставительных национальных или международных исследований по школьной успеваемости, и educational testing со ссылкой на применении инструментов оценки.

Другая интерпретация термина «доцимология» представлена французским педагогом Мартином Джеромом, который, ссылаясь на исследование Анри Пьерона, определяет её как «науку об экзаменах» [Martin, 2002:177]. Цель доцимологии заключается в изучении «организации экзаменов, их педагогическое содержание и цели, методы корректировки экзаменов и поведение экзаменаторов и экзаменуемых» [Martin, 2002:177]. Таким образом, Джером считает, что уже сначала в определении Пьерона соединяются цели технико-дидактические и политико-педагогические.

ЭТАПЫ УСТАНОВЛЕНИЯ ДОЦИМОЛОГИИ — Большинство ученых сходится во мнении, что история доцимологии делится на разные этапы и развивается в направлении расширения его поля действия.

Гвидо Бенвенуто указывает на присутствии трёх этапов в эволюции доцимологии. Первый этап (1929, 1934), главным образом вытекающий из работ Пьерона, это — критика системы школьных оценок. Со временем в сферу интересов доцимологии входят естественным образом и другие элементы, определяющие ход и значение экзаменов. На втором этапе эволюции в поле деятельности дисциплины включается «анализ поведения экзаменаторов, в большинстве случаев учителей, и экзаменуемых, в основном, учеников» [Benvenuto, 2008:1]. Третий этап состоит в изучении экзаменов и систем оценки в образовании. Таким образом, доцимология ставит перед собой цель изучать не только экзамены и школьные проверки, но также имеет политико-педагогические цели в исследовании систем оценки в образовании.

Жильбер Де Лэндшир, знаменитый специалист по методологии обучения, определил доцимологию следующим образом: «наука, имеющая в качестве предмета систематическое изучение экзаменов, в частности, систем оценки, и поведение экзаменаторов и экзаменуемых» [De Landsheere, 1973: 3]. Указывая на изначальный критический и отрицательный характер данной дисциплины, бельгийский педагог определяет главные заслуги доцимологии в экспериментальном доказательстве отсутствия надежности и валидности экзаменов. Дальнейшим этапом эволюции доцимологии является её превращение в «доксологию», науку, систематично изучающую роль оценки в школьном образовании. Это считается конструктивной фазой, охарактеризованной обработкой «более объективных методов и приёмов оценки и стремлением к созданию сопоставительных классификаций для того, чтобы обеспечивать справедливость школьных оценок» [De Landsheere, 1973: 3].

Педагогическая доксология, как более зрелая специальность доцимологии, занимается вопросами, касающимися не только интеллектуальных, но также эмоциональных сторон экзаменов, их стимулирующего или задерживающего влияния и воздействия мнения учителя на своих учеников.

ДОЦИМОЛОГИЯ, ДОЦИМАСТИКА, ДОКСОЛОГИЯ — В итоге, можно утверждать, что в конце периода своего окончательного установления, «наука экзаменов» состоит из трёх дисциплин, которые распределили свои цели таким образом, чтобы через всестороннее исследование попытаться решить главные вопросы, касающиеся образовательной оценки (технико-дидактические и политико-педагогические). Согласно терминологической классификации Де Лэндшира речь идёт о доцимологии («наука, имеющая в качестве предмета систематическое изучение экзаменов, в частности, систем оценки, и поведение экзаменаторов и экзаменуемых»), о доцимастике («техника экзаменов») и о доксологии («систематическое изучение роли оценки в образовании»).

В продолжение данного исследования, если не указано иначе, термин «доцимология» будет применяться в самом широком значении, объединяющем под одним понятием предметы и цели доцимологии, доцимастики и доксологии.

ДОЦИМОЛОГИЯ И ТЕСТОЛОГИЯ — По мнению А. В. Матиенко эти науки принципиально не отличаются между собой; наоборот, они ставят себе одну и ту же цель. «Потребность усовершенствования педагогических измерений и приближения их к приоритетам современного общества привела к возникновению науки, фигурирующей пока под разными названиями — квалиметрия, доцимология, тестология и др.» [Матиенко, 2012].

Таким образом, под понятием доцимологии более или менее имплицитно понимается исторически и географически локализированная наука, соответствующая тестологии в целом. Это мнение подтверждается тем, что в странах, где доцимология завоевала популярность, процесс оценки в школах и в высших образовательных учреждениях осуществляется согласно теоретическим основам и практическим критериям, установленным учеными доцимологии; однако, после второй мировой войны, науки, занимающиеся изучением образовательной оценки, пришли к единому мнению по главным вопросам. В настоящее время для всех сертификационных органов в Европе руководящим документом является CEFR.

В настоящее время, с увеличением внимания к роли профессиональных компетенций, вновь становится актуальным тот аспект, который уже в начале девятнадцатого века выделил Пьерон во Франции, а именно необходимость выявления и формирования профессиональных способностей учащихся во время их образовательного пути. Этот акцент на индивидуальные способности и вместе с тем на необходимость обеспечения эффективной профессиональной ориентации, является одним из самых актуальных вопросов, поднятых доцимологией.