Разработка метода и алгоритмов тестирования знаний на основе интеллектуальной обработки ответов испытуемого на естественном языке
Диссертация
В третьей главе производится исследование математических моделей средств автоматизации процессов оценки знаний методом тестирования с интеллектуальной обработкой ответов испытуемого на ЕЯ. Построена математическая модель системы-объекта исследования, основанная на использовании теории лингвистического анализа, современной теории моделирования и параметризации тестирования, методов представления… Читать ещё >
Список литературы
- Аванесов, B.C. Композиция тестовых заданий / B.C. Аванесов М.: АДЕПТ, 1998.-217с.
- Аванесов, B.C. Методологические и теоретические основы тестового педагогического контроля: автореф. дис.: д-ра пед. наук: 13.00.01 / B.C. Аванесов- С.-Петербургский гос. Ун-т-СПб., 1994.
- Аванесов, B.C. Научные основы тестового контроля знаний / B.C. Аванесов М.: Иссл. центр, 1994. — 135 с.
- Аванесов, B.C. Научные проблемы тестового контроля знаний / B.C. Аванесов М.: Учебный центр при ИЦПКПС, 1994.- 136 с.
- Аванесов, B.C. Основы научной организации педагогического контроля в высшей школе/B.C. Аванесов. М.: МИСИС, 1989, — 167 с.
- Аванесов, B.C. Теория и методика педагогических измерений / B.C. Аванесов // Управление школой. 1999 г. — № 34.
- Аверченков, В.И. Система тестирования знаний с поддержкой ответов открытого типа на естественном языке / В. И. Аверченков, Е. А. Белов // Сборник научных трудов. Известия ОрелГТУ. Сер. Информационные системы и технологии. 2006. — № 1 (5). — С. 4−8.
- Автоматический перевод семантической сети WORDNET на русский язык / И. Г. Гельфейнбейн и др. // Тр. Международного семинара Диалог-2003 по компьютерной лингвистике и её приложениям. М.: Наука, 2003.
- Андреев, А. А. Введение в Интернет-образование / А. А. Андреев. М.: Логос, 2003.-73с.
- Андреев, А.А. Дидактические основы дистанционного обучения / А. А. Андреев. М.: РАО, 1999. — 126с.
- Анфилатов, B.C. Системный анализ в управлении: учеб. пособие / B.C. Анфилатов, А. А. Емельянов, А. А. Кукушкин. М.: Финансы и статистика, 2002.-368 с.
- АОТ проект Электронный ресурс. Режим доступа: — http://www.aot.ru.
- Беспалько, В.П. Системо-методическое обеспечение учебно-вычислительного процесса подготовки специалистов / В. П. Беспалько, Ю. Г. Татур М.: Высшая школа, 1989. — 143 с.
- Беспалько, В.П. Слагаемые педагогической тестологии / В. П. Беспалько -М.: Педагогика, 1989.
- Беспалько, В.П. Элементы теории управления процессом обучения. 4.1 / В. П. Беспалько М., 1970.
- Брундасов, С. М. Автоматизация принятия решений на основе семантического анализа иерархических и сетевых моделей: дис. канд. техн. наук: 05.13.18 / Брундасов Сергей Михайлович. Брянск, 2003. — 206 с.
- Булыгин, В.Г. Основы автоматизации процесса обучения/ В. Г. Булыгин. -Йошкар-Ола, 2003. 190 с. — Библиогр.: с. 180−187.
- Ваграменко, Я.А. Развитие образовательных телекоммуникаций в России / Я. А. Ваграменко, С. Д. Каракозов // Международная конференция по программе ЮНЕСКО: Социально-экономические проблемы образования в Западно-Сибирском регионе России. Барнаул, 1995.
- Владимиров, В.Н. О возможностях компьютеризованного тестового контроля / В. Н. Владимиров, Н. А. Урусов //Компьютер и историческое знание. 1994. — с.177−183.
- Гаскаров, Д.В. Интеллектуальные информационные системы / Д. В. Гаскаров // Учеб. для вузов- М.: Высш. шк., 2003. 431 с.
- Глас, Дж. Статистические методы в педагогике и психологии: пер. с англ. / Дж. Глас, Дж. Стэндли М.: Прогресс, 1976. — 495 с.
- Глобал Персонал рекрутинговое агентство Электронный ресурс. -Режим доступа: — http://www.recruitinent.com.ua.
- Гмурман, В.Е. Руководство к решению задач по теории вероятности и математической статистике: учебное пособие / В. Е. Гмурман М: Высшая школа, 2003.-405 с.
- ГОСТ 7.24−90 Система стандартов по информации, библиотечному и издательскому делу. Тезаурус информационно-поисковый многоязычный. Состав, структура и основные требования к построению.
- ГОСТ 7.25−80 Система стандартов по информации, библиотечному и издательскому делу. Тезаурус информационно-поисковый одноязычный. Правила разработки, структура, состав и форма представления.
- Дейтел, X. М. Как программировать на XML / Х. М. Дейтел, П. Д. Дейтел. -М.: Бином, 2001.-944 с.
- Деревнина, АЛО. Системы тестирования в электронных учебниках / АЛО. Деревнина, В. А. Семикин // Информационные технологии. 2002. — № 5. -с. 39−44.
- Дистанционное обучение: к виртуальным средам знаний / В. П. Тихомиров и др. // ДО. № 2, 1999. — С. 8−16.
- Зализняк, А.А. Грамматический словарь русского языка: Словоизменение / А. А. Зализняк М: Русский Язык, 1987.
- Интернет в гуманитарном образовании/ под ред. Е.С. Полат// Учеб. пособие для вузов М.: Владос, 2001. — 271 с.
- Карпенко, Д.С. Автоматизированная система мониторинга эффективности усвоения знаний и качества тестовых заданий / Д. С. Карпенко, О. М. Карпенко, Е. Н. Шлиху нова // Инновации в образовании 2001. — № 2 — С.69−86.
- Карпенко, М.П. Дистанционные технологии ключ к массовому образованию 21 века / М. П. Карпенко // Высшее образование сегодня. -2002. — N 7−8. — С. 4−13.
- Карпенко, М.П. Опыт создания и внедрения информационно-спутниковой образовательной технологии Современного гуманитарного университета / М. П. Карпенко // Телекоммуникации и информатизация образования. -2002.-N 4.
- Карпова, И.П. Исследование и разработка подсистемы контроля знаний в распределенных автоматизированных обучающих системах: автореф. дис. канд. техн. наук: 05.13.13 / Карпова Ирина Петровна. Москва, 2002.
- Кацнельсои, С.Д. Заметки о падежной теории Филлмора / С. Д. Кацнельсои // ВЯ, № 1, 1 988.
- Комаров, И. И. Методы автоматического поиска релевантной информации в тексте на естественном языке: дис. канд. физ.-мат. наук: 05.13.01 / Комаров Игорь Иванович. Санкт-Петербург, 2003 — 115 с.
- Кривцов, А.Н. Проблемы формализации русского языка в процессах управления поисковых, обучающих и естественно-языковых систем: дис. кан. физ.-мат наук / А. Н. Кривцов СПб.: СпбГУ, 1998.
- Леонтьева, Н.Н. К теории автоматического понимания естественных текстов. 2-х частях / Н. Н. Леонтьева М.: Изд-во МГУ, 2000.
- Лукашевич, Н.В. Тезаурус русского языка для автоматической обработки больших текстовых коллекций / Н. В. Лукашевич, Б. В. Добров // Тр.
- Международного семинара Диалог'2002 по компьютерной лингвистике и ее приложениям. М.: Наука, 2002. — Т.2.
- Лурье, С.В. Психологическая антропология: история, современное состояние, перспективы: Учеб. пособие для вузов / С. В. Лурье. М. — Екатеринбург: Академический Проект: Деловая книга, 2003. — 624 с.
- Майоров, А.Н. Теория и практика создания тестов для системы образования / А. Н. Майоров. М.: Народное образование, 2000. — 352с.
- Маслак, А.А. Измерение уровня развития сферы образования в регионах России / А. А. Маслак, Т. С. Анисимова, С. И. Седых // Педагогические измерения, 2004. № 1 — сс.97 — 128.
- Маслак, А.А. Исследование дифференцирующей способности модели Раша на основе имитационного эксперимента / А. А. Маслак // Педагогическая диагностика, 2003. № 1 — сс.103 — 117.
- Маслак, А.А. Разработка измирителыюго инструмента для оценки отношения преподавателей к Единому госэкзамену / А. А. Маслак, Т. С. Анисимова // Педагогическая диагностика, № 4, 2003. сс.85 — 108.,
- Матвеенко, Р. Что такое SSL? Электронный ресурс. Режим доступа: -http://www.unixoid.spb.ru/Security/ssl2.html.
- Материалы к компьютерному тезаурусу лексики русского языка / сост.: И. В. Азарова, О. А. Митрофанова. СПб., 2002. — 232 с.
- Михайлычев, Е.А. Дидактическая тестология / Е. А. Михалычева М.: Народное образование, 2001.-432 с.
- Моисеев, В.Б. Статистический подход к принятию решений по результатам тестирования для тестов открытой формы / В. Б. Моисеев и др. // Открытое образование 2001. — № 1. — С. 51−57.
- Моисеев, В.Б. Статистический подход к принятию решений по результатам тестирования для тестов открытой формы / В. Б. Моисеев и др. // Открытое образование, 2001. № 1. [Электронный ресурс]. — Режим доступа: — http://www.mesi .ru/joe/N 1 01 /mo.html
- Нардюжев, В.И. Модели и алгоритмы информационно-вычислительных систем компьютерного тестирования / В. И. Нардюжев, И. В. Нардюжев -М.: Прометей, 2000. 148 с.
- Нейман, Ю.М. Введение в теорию моделирования и параметризации педагогических тестов / Ю. М. Нейман, В. А. Хлебников. М., 2000. — 168 с. с табл. и илл. — стр 6.
- Нейман, Ю.М. Вопросы точностных расчетов в теории моделирования параметризации педагогических тестов / Ю. М. Нейман // Труды Центра тестирования. М.: Прометей, 1999. Вып.2. — 49−54 с.
- Нейман, Ю.М. Как измерить учебные достижения? / Ю. М. Нейман // Вопросы тестирования в образовании, 2001, № 1.-е. 40−56.
- Нейман, Ю.М. Основные модели современной теории тестирования / Ю. М. Нейман, ЕЛО. Карданова // Вопросы тестирования в образовании, 2003 г. № 7.
- Овчинников, В.В. Оценивание учебных достижений учащихся при проведении централизованного тестирования / В. В. Овчинников Центр тестирования МО РФ, 2001. — 27 с.
- Основы открытого образования. Т. 1. /отв. ред. В. И. Солдаткин. -Российский государственный институт открытого образования. — М., 2002.-676 с.
- Основы открытого образования. Т. 2. /отв. ред. В. И. Солдаткин. -Российский государственный институт открытого образования. — М., 2002.-680 с.
- Основы педагогического тестирования. Тематические публикации, ссылки на другие ресурсы Электронный ресурс. Режим доступа: -http://kolsarat.chat.ru.
- Пекар, В.И. Автоматическое пополнение специализированного тезауруса. // Тр. Международного семинара Диалог-2002 по компьютерной лингвистике и её приложениям в двух томах/ под ред. А. С. Нариньяни. -М.: Наука, 2002.-Т.2.
- Перегудов, Ф.И. Введение в системный анализ / Ф. И. Перегудов, В. П. Тарасенко. М.: Высшая школа, 1989. — 367 е.
- Подласый, И.П. Педагогика: Новый курс: В 2 кн.: Кн. 1: Общие основы- Процесс обучения / И. П. Подласый Учебник для студентов педагогических вузов. — М.: «Владос», 1999, 574 стр.
- Полат, Е.С. Теория и практика дистанционного обучения / Е. С. Полат // Информатика и образование. 2001. -№ 5. — С.37−42.
- Попов, Д.И. Способ оценки знаний в дистанционном обучении на основе нечетких отношений / Д. И. Попов //Дистанционное и виртуальное обучение. 2001. — № 4. — С. 34−37.
- Попов, Э.В. Общение с ЭВМ на естественном языке / Э. В. Попов. М.: Наука, 1982.-360 с.
- Поспелов, Д.А. Уровни понимания / Д. А. Поспелов // В сб. Искусственный интеллект. В 3-х кн.- М.: Рис, 1990.
- Прометей система дистанционного обучения Электронный ресурс. -Режим доступа: — http://www.prometeus.ru.
- ПРОФОРИЕНТАТОР компьютеризированный комплекс тестирования Электронный ресурс. — Режим доступа: -http://www.ht.ru/prof/cons/ann prof.html.
- Российский портал открытого образования: обучение, опыт, организация /отв. ред. В. И. Солдаткин. М., 2003. — 508 с.
- РОССИЯ поисковая система Электронный ресурс. — Режим доступа: -http://www.cir.ru.
- Рощин, С. М. Автоматизация мониторинга и системного анализа распределенной проблемно-ориентированной информации в среде Интернет: дис. канд. техн. наук: 05.13.01 / Рощин Серегй Михайлович. -Брянск, 2005.- 197 с.
- Рыбина, Г. В. НЕ-факторы: лингвистические аспекты извлечения / Г. В. Рыбина, Р. В. Душкин // Тр. Международного семинара Диалог-2002 по компьютерной лингвистике и её приложениям в двух томах / под ред. А. С. Нариньяни. М.: Наука, 2002. — Т. 2.
- Самыловский, А.И. Государственныеобразовательные стандарты высшего профессионального образования как тестологическая основа внедрения образовательного тестирования / А. И. Самыловский // Вопросы тестирования в образовании, 2003, № 5.
- Семенов, Ю.А. Протокол SSL. Безопасный уровень соединителей Электронный ресурс. Режим доступа: — http://book.itep.ru/6/ssl 65.htm.
- Система образования и подготовка преподавателей: в 2 томах / под ред. Н. А. Белякова, А. П. Щербо. С. Петербург, 2002, — Т. 1 — 475 С.
- Современная гуманитарная академия (СГА). ВИРТУАЛЬНАЯ ЭКСКУРСИЯ ПТ-2 Электронный ресурс. Режим доступа: -http://www.rnuh.ru.
- Сокирко, А.В. Семантические словари в автоматической обработке текстапо материалам системы ДИАЛИНГ): дис. канд. техн. наук / А. В. Сокирко Электронный ресурс. Режим доступа: — http://www.aot.ru/technology.html.
- Сокирко, А.В. Сравнение эффективности двух методик снятия лексической и морфологической неоднозначностей для русского языкаф (скрытая модель Маркова и синтаксический анализатор именных групп) /
- А.В. Сокирко, С. Ю. Толдова Элеткронный ресурс. Режим доступа: -http://company.yandex.ru/grant/2005/01 Sokirko 92 802.pdf.
- Соловейчик, А.С. Система тестирования в России / А. С. Соловейчик //Первое сентября .- 2001. 29 сент.
- СпбГУ, кафедра математической лингвистики Электронный ресурс. -Режим доступа: http://www.phil.pu.ru.
- Стась, А. Н. Программно-инструментальный комплекс для автоматизированного контроля знаний: дис. на соискание ученой степени канд. техн. наук / А. Н. Стась Томск, ТГПУ, — 2004.
- Тайц, О.Г. Интеллектуальные алгоритмы математического решения научно-технических задач и применение языка БРЯН / О. Г. Тайц // Информационные процессы и системы. 2003. — № 1. — с. 16−21.
- Тайц, О.Г. Язык БРЯН и системные исследования: Интеллектуальные инструменты научного творчества / О. Г. Тайц. Брянск: Придесенье, 1994. — 142 с.
- Талызина, Н.Ф. Теоретические основы контроля в учебном процессе / Н.Ф.
- Талызина. М.: Знание, 1983. -96 с.
- Тузов, В.А. Компьютерная лингвистика. Опыт построения компьютерных словарей / В. А. Тузов. СПб.: СПбГУ, 2002, 650 с.
- Тузов, В.А. Семантический анализ текстов на русском языке / В. А. Тузов // Вестник СПбГУ. Сер. 1, 1998, вып. 1 (№ 21).
- Тузов, В.А. Семантический анализатор текстов на русском языке / В. А. Тузов // Информационные технологии в гуманитарных и общественных науках. Вып. 9: Семантико-синтаксический анализ текстов. СПб.: СПб Экон.-матем. Институт РАН, 2000
- Усатик программный комплекс тестирования Электронный ресурс. -Режим доступа: — http://usatic.narod.ru.
- Флойда алгоритм решения сетевых задач Электронный ресурс. Режим доступа: — http://a1go1ist.rnanual.ru/maths/graphs/shortpath/floyd.php.
- Хлебников, В.А. Технология масштабных процедур тестирования / В. А. Хлебников // Развитие тестовых технологий в России. V Всероссийская научно-методическая конференция 19−20 ноября 2003 г. М.: Центр тестирования МО РФ (доклад при открытии конференции)
- Хомский, Н. Конечные модели использования языка / Н. Хомский, Дж.А. Миллер // Кибернетический сборник, новая серия, № 4. — М.: Мир, 1967.
- Хоштарина, М.Г. Об одной семантической модели некоторой предикатной группы слов естественного языка / М. Г. Хоштарина // СИИ, вып. 12, М.: ВНИИТИ, 1979.
- Юб.Хуторский, А. В. Дистанционные технологии обучения // 12-летняя школа. Проблемы и перспективы развития общего среднего образования / под ред. B.C. Леднева, Ю. И. Дика, А. В. Хуторского. М.: ИОСО РАО, 1999.
- Челышкова, М.Б. Адаптивное тестирование в образовании (теория, методология, технология) / М. Б. Челышкова М.: Исследовательский центр проблем качества подготовки специалистов, 2001. — 165 с.
- Челышкова, М.Б. Разработка педагогических тестов на основе современных математических моделей / М. Б. Челышкова // Учеб. Пособие. -М.:ИЦ, 1995.
- Челышкова, М.Б. Теория и практика конструирования педагогических тестов / М. Б. Челышкова. М.: Логос, 2002. — 432 с.
- Шухардина, В.А. Квалиметрическая технология конструирование адаптированных тестовых измерителей / В. А. Шухардина // Педагогические измерения. 2004. — № 1.
- Экзаменатор система автоматизированного контроля знаний Электронный ресурс. — Режим доступа: — http://examiner.smutc.ru.
- Allen, J. Natural Language Understanding. 2nd ed. The Benjamin / J. Allen // Cummings Publ. Сотр., Inc., 1994. 654 p.
- American College Testing Program (АТС) Электронный ресурс. Режим доступа: — http://www.act.org.
- ANSI/NISO Z39.19 ANSI/NISO Z39.19 2005 Guidelines for the Construction, Format, and Management of Monolingual Controlled Vocabularies, 2005. (172 P.)
- Birnbaum, A. Some Latent Trait Models and Their Use in Inferring an Examinee’s Ability. In F.M.Lord and M.R.Novick. Statistical Theories of Mental Test scores / A. Birnbaum Reading, Mass.: Addison — Wesly. 1968. Cyr. 17−20.
- Bloom, B.S. Taxonomy of Educational Objectives: The Classification of educational Goals/ Handbook 1/ Cognitive Domain / B.S. Bloom at al.- N.-Y., David Mckay Co/ 1956.
- Brainbench employment testing Электронный ресурс. Режим доступа: -http://www.brainbench.com.
- Caraballo, S.A. Automatic construction of a hypernym-labeled noun hierarchy from text / S.A. Caraballo // Proceedings of the 37th Annual Meeting of the ACL, 1999. pp. 120−126.
- CONTROL система компьютерного тестирования Электронный ресурс. -Режим доступа: — http://control.hotmail.ru.
- Educational Testing Service Электронный ресурс. Режим доступа: -http://www.ets.org.
- Fellbaum, С. WordNet: An Electronic Lexical Database / С. Fellbaum. -Cambridge, 1998.
- Global WordNet Association Электронный ресурс. Режим доступа: -http://www.globalwordnet.org.
- Greffenstette, G. Evaluation techniques for automatic semantic extraction: comparing syntactic and window based approaches / G. Greffenstette // Proceedings of the SIGLEX Workshop on Acquisition of Lexical Knowledge from Text. Columbus Ohio, 1993.
- Hakulinen, A. Keskustelun luonnehtimisesta konteksti- ja funktionaalisten tekijoiden nojalla / A. Hakulinen // Kieli, No 4. Suomalaisen keskustelun keinoja 1. Ed. by Auli Hakulinen. Helsinkin yliopiston suomen kielen laitos. Helsinki, 1989, p. 41−72.
- Hambleton, R.K. Fundamentals of Item Response Theory / R.K. Hambleton, H. Swaminathan, H.J. Rogers // N-Y.: SAGE Publications, 1991. 174 p.
- Hearst M. and Schutze H. Customizing a lexicon to better suit a computational task // Proceedings of the SIGLEX Workshop on Acquisition of Lexical Knowledge from Text. Columbus Ohio, 1993. pp. 55−69.
- ISO 2788:1986 Documentation Guidelines for the establishment and development of monolingual thesauri 2nd ed., 1986. (32 p.).
- ISO 5963:1985 Documentation Methods for examining documents, determining their subjects, and selecting indexing terms 1985 (5 p.)
- ISO 5964:1985 Documentation Guidelines for the establishment and development of multilingual thesauri 1985. (61 p.)
- ISO 639:1988 Code for the representation of names of languages, 1988 (17 p.)
- Jokinen, K. Cooperative response planning in CDM: Reasoning about communicative strategies / K. Jokinen // Proceedings of the 10th COLING-96, Stanford, 1984, p. 444−447.
- Lord, F.M. Applications of item response theory to practical testing problems / F.M. Lord // Hillsdale, N. J.: Lawrence Erlbaum, 1980. 274 p.
- Miller, G. Five Papers on WordNet. CSL-Report, vol. 43 / G. Miller, et al. Princeton University, 1990.
- Moore, J.D. Participating in Explanatory Dialogues. Interpreting and Responding to Questions in Context / J.D. Moore // MIT Press, Cambridge, Mass., 1995.
- Pavelek, T. VisDic A New Tool for WordNet Editing / T. Pavelek, K. Pala // First International WordNet Conference. Mysore, 2002. P. 192−195
- Rasch, G. On General Laws and the Meaning of Measurement in Psychology / In Proceedings of the Fourth Berkley Symposium on Mathematical Statistics and Probability // G. Rasch Berkley: Univ. of California Press, 1961.
- Rasch, G. On Specific Objectivity: An Attempt of Formalizing the Request for Generality and Validity of Scientific Statements / G. Rasch Danish Yearbook of Philosophy. 1977, v. 14, p. 58 — 94, Munksgaard, Copenhagen. — 216p.
- Rasch, G. Probabilistic Models for Some Intelligence and Attainment Tests. With a Foreword and Afteword by B.D. Wright / G. Rasch The Univ of Chicago Press. Chicago & London, 1980. — 199 p.
- RCO Технологии анализа текстовой информации. Тезаурус RCO Thes Электронный ресурс. — Режим доступа: — http://www.rco.ru.
- Testing centre Sylvan Prometric Электронный ресурс. Режим доступа: -http://www.sylvanprometric.com.
- Tokunaga, Т. Extending a thesaurus by classifying words / T. Tokunaga, A. Fujii, M. Iwayama, N. Sakurai, H. Tanaka // Proceedings of the ACL-EACL Workshop n Automatic Information Extraction and Building of Lexical Semantic Resources, 1997. pp. 16−21.
- Virtual University Enterprises (VUE) Электронный ресурс. Режим доступа: — http://www.vue.com.
- Vossen, P. EuroWordNet: A Multilingual Database with Lexical Semantic Networks / P.Vossen. Dodrecht, 1998.
- W3C Resource Description Framework Электронный ресурс. Режим доступа: — http://www.w3 .org/RDF.
- WordNet thesaurus Электронный ресурс. Режим доступа: -http://www.cogsci.princeton.edu/~wn/.
- Wright, B.D. Best Test Design / B.D. Wright, M.H. Stone // Chicago.: MESA Press, 1979.-222 p.
- Wright, B.D. Detecting and Correcting Test Item Bias with a Logistic Response Model / B.D. Wright, R. Mead, R. Draba MESA Research Memorandum Number 22, MESA Psychometric Laboratory, 1976.
- Wright, B.D. Fundamental Measurement for Outcome Evaluation / B.D. Wright MESA Memorendum 66, MESA Psychometric Laboratory, 1997.
- Wright, B.D. History of Social Science Measurement / B.D. Wright -Educational Measurement: Issue and Practice, 16(4), 1997. p. 33−45.