Адаптация АИС «Экзамен»
Название: Система автоматизации проведения процедур массового оценивания знаний учащихся в бланочной форме Автоматизированная информационная система (АИС) "Экзамен"
Разработчик ЗАО КРОК Инкорпорейтед (http://croc.ru), 2002-2007 гг. e-mail: AShain@croc.ru; DDeev@croc.ru
Рубрикатор:
- Инструментарий тестирования учащихся;
- Другое (инструментарий автоматизации процедур контроля (оценки) образовательных достижений).
Краткое описание
- Цель разработки: Комплексная автоматизация операций, связанных с проведением бланочного тестирования;
- Возрастная группа: обучающиеся 4 11 классов;
- Характеристика выборки: любая, формируемая организатором исследований;
- Периодичность проведения: любая, формируемая организатором исследований (рекомендуется использование в целях организации процедур входного, рубежного, итогового контроля);
- Предмет оценки: результаты и динамика образовательных достижений обучающихся на ступенях начального, основного и среднего (полного) образования;
АИС «Экзамен» реализована в рамках классической трехзвенной архитектуры. В качестве сервера хранения используется сервер баз данных Microsoft SQL, в качестве сервера приложений используется Microsoft Internet Information Server и тонкий клиент на основе Microsoft Internet Explorer. В своей минимальной конфигурации система состоит из одного офисного компьютера средней мощности, одного сканера и обычного офисного принтера и позволяет проводить экзамены для 2000-2500 учащихся. Максимальное количество тестируемых ограничено лишь конфигурацией сервера и сети (Московская область – 90000 обучающихся). Реальной практикой эксплуатации системы в РФ России зафиксирован факт единовременной обработки более 100000 экзаменационных работ (г. Москва). Технология применения АИС «Экзамен» основана на распознавании заполненных от руки бланков тестирования и автоматизирует весь экзаменационный процесс (сбор и выверка информации, планирование контрольных мероприятий, подготовка экзаменационных материалов и их обработка после проведения экзамена, проверка заданий всех типов). Функциональное ядро АИС — система распознавания рукописных документов, выполненных в виде бланочных машиночитаемых документов (МЧД). Кроме того, возможность провести полный статистический анализ полученных результатов позволяет принимать управленческие решения, направленные на повышение качества образования.
Система предусматривает различные уровни обработки информации:
- Основным уровнем для региона в настоящее время является т.н. РЦОИ (региональный центр обработки информации), у которого есть возможность как принимать данные из федерального центра, так и полностью самостоятельно создавать оценочные мероприятия с любыми необходимыми параметрами.
- Второй уровень – ППОИ (пункт первичной обработки информации) – обычно это районный ресурсный центр (РРЦ) или муниципальный орган управления образования (МОУО), но возможны варианты, когда ППОИ может организовываться на базе любого образовательного учреждения. ППОИ может работать в нескольких режимах – обычный, когда в ППОИ производится только печать бланков, а доставка для экзамена материалов осуществляется доверенными сотрудниками РЦОИ. Второй режим – режим ТОМ (труднодоступная отдаленная местность) – в этом случае ППОИ полностью автономен и осуществляет все функции предварительной обработки бланков тестируемых. При этом есть возможность передавать материалы в ППОИ в зашифрованном виде, а также при необходимости, контролировать проведение тестирования с помощью видеонаблюдения.
- Третий уровень – образовательное учреждение. На этом уровне осуществляется только сбор информации об учащихся и выбранных оценочных мероприятиях.
Основная обработка результатов проводится на уровне РЦОИ. В эту обработку входят процессы:
- контроля баланса бланков (количество распечатанных и отсканированных бланков);
- получение веера ответов тестируемых;
- наложение ответов для заданий с выбором ответов и заданий с кратким ответом (в том числе, специалистами ЦОКО дополнительно разработан механизм наложения ответов для заданий с частично-правильными ответами и другие дополнительные функции)
- выдача на проверку и обработка результатов проверки заданий со свободным ответом ( при этом возможно обеспечение проверки каждого бланка одним или двумя экспертами и возможность выдачи спорных результатов на третью проверку)
- сбор апелляций и обработка результатов их проведения
- выдача результатов и формирование отчетов;
- анализ результатов с помощью модуля аналитики или другими средствами;
- выдача свидетельств по результатам тестирования.
Дополнения к системе, выполненные Центром оценки качества образования Томской области:
- механизм внесения и обработки частично-правильных ответов;
- использование веера ответов тестируемых для внесения дополнительных вариантов ответов после тестирования;
- автоматическое назначение различных параметров системы на этапах сбора данных и подготовки оценочных мероприятий (использование на всех уровнях системы с помощью сервисных программ - скриптов);
- автоматическая рассадка экспертов по пунктам проверки заданий, для проверки заданий с развернутым ответом в пунктах первичной обработки информации в случае использования распределенной технологической схемы;
- получение любых бланков из системы на уровне РЦОИ в электронном формате (PDF) для рассылки в случае сбоев в системе или других исключительных случаях;
- доработка форм отчетов для любых заданных условий (решаемость заданий по различным типам заданий, по образовательным учреждениям, по муниципалитетам, средние баллы, дисперсия баллов и т.д.);
- шкалирование результатов по любым заданным интервалам и внесение итоговых отметок в систему;
- печать свидетельств по результатам любых оценочных мероприятий (изначально подразумевалась только печать результатов ЕГЭ).
Отличительные особенности: Система имеет ряд характеристик, позволяющих использовать ее в различных областях оценивания знаний учащихся, при минимальных финансовых и трудовых затратах:
- ВСЕ процессы подготовки и проведения тестирования полностью автоматизированы;
- Использование распределенной схемы организации экзаменов позволяет проводить все процедуры подготовки, проведения экзамена и обработки результатов в первичных пунктах обработки информации (в муниципалитетах), включая печать бланков ответов и заданий, их сканирование и верификацию;
- возможность полной автоматизации процессов подготовки и проведения тестирования в труднодоступных и удаленных районах;
- оперативность обработки результатов тестирования;
- возможность использования любых форм заданий, в том числе и заданий с развернутым ответом;
- анонимность проверки ответов учащихся;
- возможность настройки на задачи отдельного образовательного учреждения;
- высокий уровень информационной безопасности, невозможность злоупотреблений со стороны персонала;
- возможность проведения апелляций по результатам тестирования;
- возможность печати свидетельств, подтверждающих результаты тестирования.
Источники:
сайт ЗАО КРОК ИНКОРПОРЕЙТЕД www.croc.ru;
Сайт ЦОКО Томской области http://www.coko.tomsk.ru.
Статус разработки:
Первоначально система разрабатывалась для проведения Единого Государственного Экзамена, но в связи с переходом на технологию АИС ЕГЭ использование ее в этих целях было прекращено. В настоящее время в Томской области автоматизированная информационная система (АИС) "Экзамен" используется для проведения Государственной Итоговой Аттестации выпускников IX классов в новой форме (ГИА-9). Техническая поддержка и доработка некоторых функций системы для этих целей осуществляется специалистами ЦОКО.
Ключевые слова: автоматизация контроля знаний, портфолио обучающегося, динамика образовательных достижений; контрольно-измерительные материалы; рубежный контроль; входной контроль; уровень обученности.