Программно-инструментальный комплекс для автоматизированного контроля знаний

• Автор: Стась, Андрей Николаевич
• Шифр специальности: 05.13.18
• Научная степень: Кандидатская
• Год защиты: 2004
• Место защиты: Томск
• Количество страниц: 199 с. : ил.

Содержание
Введение

Глава 1. О проблемах объективного контроля знаний

1.1. Понятие педагогического теста

1.2. Виды тестовых заданий

1.3. Основные статистические параметры педагогических тестов

1.3.1. Матрица тестовых заданий

1.3.2. Сложность или трудность тестового задания

1.3.3. Различительная способность и коэффициент дискриминации

1.3.4. Надежность теста

1.3.5. Значимость валидность

1.3.6. Оптимальная длина теста
1.4. Требования к средствам тестирования
1.5. Классификация и состояние работ по автоматизированным средствам контроля знаний
1.5.1. Общий обзор автоматизированных средств контроля знаний
1.5.2. Обзор средств оперативного контроля знаний
1.5.3. Обзор средств итогового контроля знаний
1.5.4. Основные проблемы проведения вступительных экзаменов
1.5.5. Основные принципы организации работы приемной комиссии при использовании системы Экзамены
Выводы к главе 1
Глава 2. Системы оперативного и итогового контроля знаний
2.1. Система оперативного контроля знаний
щ 2.1.1. Основная концепция системы
2.1.2. Формат тестовых файлов .1
2.1.3. Совместимость
2.1.4. Безопасность
2.1.5. Область применения
2.1.6. Использование системы
2.1.7. Требования, предъявляемые к разработке тестовых заданий
2.1.8. Расчет статистических параметров
2.1.9. Испытание оболочки на примере курса Теоретические основы информатики, как пример использования системы
2.1 Основные преимущества системы x
2.2. Система итогового контроля знаний СИКЗ
2.2.1. Основные принципы педагогической технологии В. М. Монахова
2.2.2. Формат тестового задания и структура банка тестовых
заданий
2.2.3. Структура оболочки
2.2.4. Использование системы
2.2.5. Расчет статистических параметров
2.2.6. Испытание СИКЗ на примере курса Теоретические основы информатики, как пример использования системы
2.2.7. Основные преимущества СИКЗ Выводы к главе
Глава 3. Разработка автоматизированной системы проведения вступительных экзаменов
3.1. Разработки, направленные на решение проблемы автоматизированного проведения вступительных экзаменов
3.2. Проведение вступительных испытаний с помощью системы Экзамены
3.2.1. Заполнение баз данных тестов
3.2.2. Печать экзаменационных билетов
3.2.3. Подготовка средств кодирования работ
3.2.3. Сканирование билетов
3.2.5. Ручной ввод ответов
3.2.6. Подготовка списка экзаменуемых лиц
3.2.7. Кодирование работ
3.2.8. Проверка работ
3.2.9. Распознавание ответов абитуриента
3.2 Декодирование работ
3.2 Печать экзаменационных ведомостей
3.3. Обеспечение безопасности данных в процессе функционирования системы
3.4. Решение технической проблемы распознавания штрих кодов
и ответов абитуриентов
3.4.1. Постановка задачи
3.4.2. Основные подходы к решению задачи
3.4.3. Основные этапы решения задачи
3.4.4. Поиск блока индексов
3.4.5. Обработка блока индексов с последующей сегментацией
3.4.6. Методы распознавания индексов внутри блока
3.4.7. Используемый подход к распознаванию индексов
3.5. Подсистема удаленного тестирования
3.5.1. Общее назначение подсистемы
3.5.2. Тестсервер
3.5.3. Клиентская часть
3.5.4. Вебсайт подсистемы
3.6. Система контроля остаточных знаний через Интернет
3.7. Основные результаты апробирования системы в процессе работы приемной комиссии ТГПУ
3.8. Основные преимущества системы Экзамены
Выводы к главе 3
Заключение
щ Список использованных источников
Приложение 1. Техническое описание системы x и СИКЗ
П1.1. Система x
П 1.2. СИКЗ
Приложение 2. Образцы экзаменационных билетов
Приложение 3. Испытание системы x в курсе теоретических основ информатики пример теста
I Приложение 4. Заполнение баз данных тестов
П4.1.Форматы тестовых материалов, предоставляемые предметниками
П4.2. Подготовка баз данных тестовых заданий
П4.3. Генерация экзаменационных билетов.
ВВЕДЕНИЕ
Актуальность


Излагаются результаты испытаний систем x и СИКЗ в учебном процессе на примере курса Теоретические основы информатики. В третьей главе рассматривается задача автоматизации проведения вступительных испытаний в ВУЗах. Рассматриваются различные подходы к решению этой задачи. Излагаются основные принципы, положенные в основу системы Экзамены. При этом основное внимание уделяется решению задач генерации индивидуальных экзаменационных билетов и автоматической проверки экзаменационных работ, включающей автоматическое сканирование ответов абитуриента и выставления балла в 0бальной шкале, применяемой в эксперименте по проведению единого государственного экзамена, а также удаленному тестированию через Интернет. Приводятся основные результаты испытания системы Экзамены в работе приемной комиссии ТГПУ. В приложениях описаны основные параметры авторских разработок, выполненных в ходе данного исследования тестовая оболочка x, система итогового контроля знаний СИКЗ, система Экзамены, приведены акты о внедрении авторских разработок, копии свидетельств о регистрации программных продуктов, дипломов и сертификатов. Диссертация основана на теоретических, методических и экспериментальных исследованиях, выполненных автором и сотрудниками кафедры информационных Института прикладной информатики Томского государственного педагогического университета. Теоретические и практические результаты, изложенные в работе, в основном получены автором. Глава 1. В последнее время все больше исследователей обращается к проблеме объективного контроля знаний. Проблема приобрела международное значение и поэтому созданы соответствующие стандарты контроля знаний. Например, фирмой I разработан единый стандарт тестовых заданий Ii i Iii II . Данный стандарт определяет как типы тестовых заданий, так и стандартный язык их определения на основе x. Стандарт предназначен, главным образом, для организации обмена заданиями между различными тестовыми системами. Используемые в настоящее время традиционные методы контроля с этой точки зрения обладают рядом недостатков. Вопервых, при традиционном контроле знаний балл аттестуемого определяется преподавателем и, таким образом, является субъективным. На этот балл могут влиять многие факторы, не имеющие отношения к уровню знаний испытуемого, такие как личное отношение преподавателя к испытуемого, настроение преподавателя в определенный момент и т. Вовторых, в процессе традиционного контроля практически невозможно определить четкие критерии оценивания знаний. Втретьих, традиционный экзамен достаточно рутинная процедура с большими трудозатратами со стороны преподавателя, а практической возможности для хотя бы частичной автоматизации этого процесса нет. В тоже время существует метод, лишенный данных недостатков использование тестов. Эта идея оформилась еще в рамках теории программированного обучения и программированного контроля , в х г. За рубежом средства тестирования разрабатываются уже несколько десятков лет, а в нашей стране последние десять лет. Вопросы применения тестов для контроля знаний являются предметом теории педагогических тестов. В качестве основного понятия этой теории, вслед за Аванесовым 2 рассмотрим понятие задания. Это понятие включает в себя все существующие формы контрольных педагогических материалов. Тест это научнообоснованный метод измерения интересующих качеств и свойств личности2, педагогический тест это система заданий возрастающей трудности и специфической формы, позволяющая качественно оценить структуру и измерить уровень знаний 2. Тест состоит из отдельных тестовых заданий. В аналитической работе к преимуществам тестирования отнесены возможность дать оценку индивида в соответствии с поставленной целью исследования обеспечение возможности количественной оценки качественных параметров личности удобство математической обработки результатов оперативность при обследовании большого числа неизвестных лиц получение объективных оценок, не зависящих от субъективных установок лица, проводящего исследование обеспечение сопоставимости информации, полученной разными путями на разных испытуемых.