Повышенные требования к уровню подготовки студентов высших учебных заведений и методы осуществления контроля предполагают различные подходы к разработке измерительных материалов, которые объективно и всесторонне могли бы оценить качество подготовки студентов. Важной особенностью оценки качества подготовки студентов при проведении Интернет-экзамена является полный охват дидактических единиц ГОС по контролируемой дисциплине. Измерительные материалы предназначены для проверки обязательного (базового) уровня подготовки и предполагают использование знаний и умений в знакомой ситуации, т.е. задания рассчитаны на типовые действия.
Важной составляющей методики оценки качества подготовки студентов по результатам Интернет-экзамена является модель информационно-аналитической поддержки принятия решений, которая содержит графические формы представления результатов: рейтинг - лист; гистограмма плотности распределения результатов, карта коэффициентов решаемости заданий по темам; карта коэффициентов освоения дидактических единиц дисциплины; график освоения дисциплины на основе выполнения совокупности ДЕ; диаграмма упорядочения результатов контроля освоения ГОС. Эти формы представления результатов Интернет-экзамена позволяют определить уровень и качество усвоения программного материала по темам, группам обучающихся, уровню сложности, получить информацию о типичных ошибках и затруднениях.
Педагогические измерения, проводимые для контроля выполнения требований государственных стандартов, представляют интерес не только с точки зрения оценки качества подготовки обучающихся образовательных учреждений, но и с точки зрения анализа качества используемых измерительных материалов. Анализ статистических параметров заданий, разработанных для проведения Интернет-экзамена (коэффициент решаемости задания, дифференцирующая способность, коэффициент точечно-бисериальной корреляции для правильного ответа и для дистракторов) позволил сформулировать обобщающие выводы по качеству аттестационных педагогических измерительных материалов. Эти выводы подтверждают, что задания АПИМ с высокой степенью надежности проверяют и оценивают содержание и уровень подготовки студентов на соответствие требованиям ГОС.
На федеральном уровне по результатам Интернет-экзамена создается система мониторинга качества подготовки студентов по основным образовательным программам высшего профессионального образования, что позволяет отслеживать общероссийский уровень подготовки студентов. Результаты Интернет-экзамена могут быть использованы вузами для целей самообследования. Регулярное участие вуза в Интернет-экзамене может стать основой оценки уровня подготовки студентов для целей аттестации основных образовательных программ, реализуемых в вузе. Проведение эксперимента показало высокую эффективность предложенной формы оценки результатов обучения и заинтересованность вузовской общественности в его расширении.[2]
1.2 Информационно-программное обеспечение Интернет-экзамена в сфере профессионального образования
С мая 2005 г. Национальное аккредитационное агентство в сфере образования (Росаккредагентство) проводит Интернет-экзамен в сфере профессионального образования. Для реализации этой технологии был разработан специализированный информационно-программный комплекс, удовлетворяющий следующим требованиям:
· автоматизированное информационное взаимодействие с участниками тестирования;
· возможность проведения тестирования в двух режимах: on-line (с постоянным подключением к сети Интернет) и off-line (в локальной сети учебного заведения);
· дисциплинарный и полидисциплинарный (задания по нескольким дисциплинам в одном тесте) подходы к тестированию;
· автоматизированная подготовка большого объёма тестовых материалов (для каждой специальности должны формироваться индивидуальные тесты в соответствии с требованиями ГОС по данной дисциплине;
· применение достаточно разнообразных тестовых материалов (разные типы заданий, расширенные возможности по оформлению заданий);
· автоматизированная подготовка информационно-аналитических материалов по результатам тестирования, предоставляемых участникам Интернет-экзамена.
Для информационной поддержки Интернет-экзамена разработан веб-сайт www.fepo.ru, содержащий информационно-методические и инструктивные материалы и обеспечивающий взаимодействие с участниками Интернет-экзамена: регистрация и заполнение электронной схемы участия в тестировании, проведение тестирования в режиме on-line, приём результатов off-line тестирования для обработки, выдача первичных результатов тестирования (рейтинг-листов) и т.д.
Для управления заявками образовательных учреждений, отслеживания текущего состояния тестирования и получения первичной статистики, генерации контрольных баз заданий для off-line тестирования и других задач создано отдельное веб-приложение - автоматизированное рабочее место (АРМ) диспетчера Интернет-экзамена.
Разработанное программное обеспечение постоянно совершенствуется и успешно используется в рамках Интернет-экзамена в сфере профессионального образования.
1.3 Европейские стандарты и руководящие принципы Болонского процесса (г. Берген, 19-20 мая 2005 г.) в свете Интернет-экзамена ФЭПО
В мае 2005 года разработаны так называемые Европейские стандарты и руководства для систем гарантии качества высшего образования, которые утверждены советом министров европейских стран, отвечающих за образование. Один из руководящих принципов звучит так: в вузах должны разрабатываться системы, помогающие демонстрировать качество образования. Данное положение говорит о том, что система оценки качества должна быть открытой. И в этом контексте задача Рособрнадзора и Росаккредагентства состоит в создании системы, которая бы позволила доказывать, что качество подготовки студентов отвечает требованиям как минимум государственных образовательных стандартов. Поэтому идея Интернет-экзамена состоит в формировании таких тестовых материалов, чтобы вуз или ссуз мог сравнить себя по результатам знаний студентов с госстандартом и определить, как тот смотрится на фоне всех остальных. Для студентов это также является важным. Известно, что сейчас многие обучаются на платной основе, причем примерно 20% занимаются в филиалах и небольших негосударственных вузах и ссузах. Получая положительную оценку, студент просто может не знать, что уровень требований в вузе настолько низкий, что успешно учиться может любой. Проведение Интернет-экзамена позволяет молодому человеку оценить свои знания в сравнении с другими. Образование сейчас понимается как общественная услуга. Поэтому вполне уместно задаться вопросом: а совпадает ли уровень преподавания в этом конкретном образовательном учреждении с требованиями образовательного стандарта? На каком уровне идет преподавание дисциплины?
Кроме студентов информацию получают все управленческие звенья образовательной «цепи»: это преподаватели и кафедры, деканы и ректорат. Совокупная информация интегрируется, с тем чтобы на уровне министерства и Рособрнадзора складывалась цельная картина, отражающая, насколько ГОС адекватны возможностям студентов и как те справляются с их выполнением. Если коротко, то в этом и состоит задача Интернет-экзамена собрать объективную информацию для всех уровней: от студента до министра.[3]
Среди прочих принципов Болонского процесса, отраженных в ФЭПО можно отметить следующие:
•Поставщики высшего образования несут основную ответственность за качество и его гарантию
•Должно поощряться развитие культуры качества в вузах
•Гарантия качества с целью отчетности полностью равна по значимости гарантии качества с целью совершенствования учебного процесса
•Учебные заведения должны демонстрировать качество своей деятельности как в стране, так и на международной арене
Глава II. Официальный сайт Интернет-экзамена ФЭПО
2.1 Анализ форума официального сайта Интернет-экзамена ФЭПО
Так как задачей моего исследования было проследить, насколько полно воплотились в жизнь идеи создателей ФЭПО об использовании Интернет-экзамена как системы внешней оценки качества подготовки студентов, необходимо было выяснить каково отношение к идее Интернет-экзамена ФЭПО не только самих создателей и разработчиков, но и непосредственно тех, кто будет подвержен проведению данной процедуры, а именно: студентов и преподавателей.
В ходе данного исследования был проведен анализ сообщений форума официального сайта ФЭПО, что позволило выявить ряд проблем и недостатков тестовых материалов ФЭПО.
Вот некоторые из них:
•Наличие ошибок даже в репетиционных заданиях;
•Многие вопросы составлены некорректно или же слишком сложно, из-за чего большое количество времени тратится на то, чтобы понять смысл задания;
•Наличие вопросов, находящихся за рамками учебной программы;
•Сбои в работе контроля (не срабатывает программа на выбранный ответ);
•Степень сложности Интернет-экзамена часто не соответствует числу учебных часов отводимых на дисциплину;
•Наличие вопросов с неоднозначным ответом, при условии, что выбрать можно только 1 ответ и др.[4]
2.2Анализ результатов анкетирования, проведенного в ПГУ им. Ломоносова среди студентов факультета иностранных языков и преподавателей факультетов психологии и философии
Так же для выполнения задачи, заявленной в начале исследования, было проведено анкетирование в Поморском Государственном Университете им. М.В. Ломоносова среди студентов факультета иностранных языков и преподавателей факультетов психологии и философии. В ходе этого исследования было отмечено следующее:
oБольшинство студентов (50% опрошенных) считают, что традиционный экзамен, проводимый в устной форме, более объективно выявляет знания студентов, чем письменный экзамен (25%), итоговое тестирование, проводимое преподавателем (12,5%), или Интернет-экзамен (12,5%).