Компьютерные тестирования (стр. 11 из 12)

2.6. Дидактические и методические вопросы организации контроля в компьютерных обучающих средах.

Компьютерные технологии тестирования по сравнению с традиционными методиками предлагают расширенные средства контроля знаний, умений и навыков (ЗУН) – от диалоговых систем вопрос-ответ до ситуационно-имитационных моделирующих тестовых систем виртуальной реальности.

Спектр задач контроля в КОС включает начальный (входной), текущий и завершающий контроль/диагностику. Задачи контроля/диагностики уровня подготовки обучаемого делятся на две группы:

(а) диагностика усвоения знаний,

(б) диагностика овладения умениями и навыками.

В настоящее время наиболее распространенным является метод компьютерного тестирования: "выбери правильный ответ из предложенных вариантов" .Основные недостатки этого метода:

1. Большая вероятность обучиться неправильному (запомнить неправильный ответ),

2. Формирование привычки угадывания ответа,

3. Блокирование / торможение системы размышлений обучаемого при формировании ответов,

4. Необходимость иметь большую базу вопросов по учебной теме для случайной генерации текущей группы неповторяющихся тестовых вопросов при многократном использовании тестирующей системы,

5. Высокая трудоемкость создания качественных тестов при практическом отсутствии возможности автоматизировать процесс порождения правдоподобных, но неправильных ответов,

6. Невозможность эффективной оценки умений и навыков.

Из-за перечисленных недостатков использовать такие тесты при начальной и текущей диагностике нельзя. Возможно их использование при завершающем контроле, но с учетом всех недостатков.

Предлагаемая альтернатива:

(А) при оценке знаний – создание систем автоматизированного семантического анализа, которые позволяют обучаемому формировать ответ на естественном языке,

(Б) при оценке умений и навыков – создание имитационно-ситуационных моделирующих программных систем, позволяющих обучаемому выполнять реальные действия в моделирующей среде.

Предложения по созданию тестирующей системы на основе семантического анализатора

Основной задачей автоматизированного семантического анализа является выделение смыслового содержания произвольного высказывания, записанного в условном соответствии с грамматикой некоторого неформализованного (в общем случае) языка.

Формализованное смысловое содержание высказывания называется смысловой структурой высказывания или просто смысловой структурой. Для разработки и описания алгоритмов выделения и обработки смысловых структур, удобнее представлять их графами, вершины которых отождествлены с объектами, действиями и свойствами, а ребра с соотношениями между ними. В неформализованных языках часто случается что одно и то же высказывание может быть интерпретировано по-разному, в особенности, если в записи высказывания допустимы ошибки, поэтому одному высказыванию изначально следует ставить в соответствие не один, а несколько графов (смысловых структур), и уже после этого производить отбор среди них по дополнительным критериям. Множество неэквивалентных графов, соответствующих одному высказыванию, называется интерпретацией. Таким образом, в рамках перечисленных определений, анализатор есть алгоритм, генерирующий по заданному высказыванию его интерпретацию.

2.7. К вопросу о требованиях, предъявляемых к системам компьютерного тестирования.

С точки зрения педагога-предметника, в системах компьютерного тестирования хотелось бы иметь следующие возможности:

1. применения мультимедийных технологий при тестировании.

В большинстве тестовых оболочек задания представляются в виде текста (иногда с применением графики). Мультимедийные тестирующие системы объединяют текстовые, графические, анимационные и видеоматериалы в наиболее эффективных сочетаниях и используют одновременно все каналы общения для передачи информации: текст, изображение и звуковое сопровождение. Озвучивание вопросов и вариантов ответов позволяет исключить ошибки испытуемого при неверном прочтении задания; а в дисциплинах, связанных с изучением иностранных языков подача материала в аудио-форме является обязательной. Графика (рисунок, схема, фотография) может быть включена в формулировку как вопросов, так и вариантов ответов. При этом графический вариант ответа может быть представлен выбором некоторой области на экране (например, область на графике функции, точка либо функция). Истинность или ложность ответа, выбранного испытуемым, тоже может быть представлена графически. Использование анимированной графики, видеофрагментов позволяют сделать более наглядными задания на определение последовательности действий, продемонстрировать развитие ситуации в зависимости от ответа, выбранного испытуемым и т.д.

2. использования псевдотестовых заданий, например, цепных, текстовых, ситуационных и даже нетестовых, например: кроссвордов, ребусов и т.п.;

3. применения подготовленного теста не только для контроля, но и для самоконтроля знаний. В этом случае студент после выполнения такого теста получает сведения об успешности своих действий, а после окончания самоконтроля может вновь вернуться к заданиям, на которые давал неправильные ответы и попробовать снова ответить. Таким образом будет реализован элемент тренажа;

4. использования алгоритмов адаптивного тестирования, обусловливающих выбор очередного задания в зависимости от ответов тестируемого на предыдущие вопросы;

5. применения гипертекстовых ссылок в режимах самоконтроля и тренинга;

6. проведения тестирования в сетевом варианте.

Перечисленные выше дополнительные возможности расширили бы сферу применения систем компьютерного тестирования.

В зависимости от целей тестирования можно работать с готовыми тестовыми оболочками, или разрабатывать тестирующие модули в среде HyperMethod 3.5, которая позволяет создавать интересные мультимедиа-продукты, включающие текст, графику, звук, видео и анимацию. Эффективна организация такой работы по методу проектов, над которыми работают творческие группы студентов и преподавателей. Созданы и проходят апробацию мультимедийные тестирующие модули по отдельным темам курсов физики, информатики, иностранного языка.

2.8. Работа с тестером ADSoftTester.

В ходе выполнения данной работы, мы подробнее знакомимся с работой одного из тестологов. ADSoftTester используется в обучающей системе с целью проверки и контроля знаний учащихся.

Комплекс тестирования состоит из трех условно независимых частей: программы тестирования знаний, программы создания тестов и программы администрирования.

Программа тестирования позволяет определить уровень знаний ученика в той или иной области. После прохождения теста ученику выставляется оценка, вся информация о прохождении теста записывается в журнал.

Программа администрирования позволяет учителю создавать, изменять или удалять группы пользователей (аналог классов), редактировать карточки пользователей, просматривать результаты тестирования и проводить анализ ответов учащихся.

Программа создания тестов служит для подготовки новых тестов. С ее помощью можно создать тест, включить в него критерии оценки, установить временные рамки, - установить все параметры тестирования.

Программа тестирования.

В данном разделе более подробно рассмотрим саму программу тестирования.

Программа имеет два режима тестирования: контроль и обучение.

В режиме обучения тестирование проходит анонимно, результаты тестирования не записываются в журнал. В случае неверного ответа на вопрос пользователю выдается комментарий с краткими пояснениями допущенных им ошибок.

В режиме контроля перед тестированием пользователю предлагается идентифицировать себя (открыть уже существующую карточку пользователя, либо создать новую), все пользователи распределены по группам, что облегчает поиск. Далее пользователь проходит тест (при неверном ответе на вопрос, в отличие от режима обучения, разъяснений не следует). Выставленная оценка и вся информация по прохождению теста записывается в журнал.

В тесте могут встречаться вопросы следующих четырех типов:

1) одиночный выбор – задается вопрос и несколько вариантов ответов из которых пользователь может выбрать только один вариант ответа.

2) множественный выбор – на заданный вопрос также дается несколько вариантов ответов из которых пользователь выбирает один и более вариантов ответа.

3) ввод ответа с клавиатуры – предполагает такое формулирование вопроса, на который тестируемый должен ввести ответ с клавиатуры самостоятельно.

4) соответствие – данный вид вопроса предполагает ввод вопроса таким образом, чтобы тестируемому было понятно, что ему необходимо сопоставить элементы 2х списков, то есть каждому элементу из первого списка должен соответствовать элемент из второго списка.

5)порядок- данный вид вопроса предлагает тестируемому установить последовательность ответа.

Администратор может установить параметры показа той или иной информации тестируемому (оставшееся время, количество вопросов, результаты тестирования) в программе администрирования.