Компьютерные тестирования (стр. 7 из 12)

Необходимо использовать простую, грамматически правильную утвердительную форму задания в виде одного предложения из 5–20 слов, без оборотов, используя простые придаточные предложения, без переноса фрагмента тестового задания на новую страницу.

Не использовать в заданиях "нестрогие" слова типа "иногда", "часто", "всегда", "все", "никогда", "большой", "небольшой", "малый", "много", "меньше", "больше" и грамматические обороты типа "Почему не может не…", "Правда ли, что …", "Возможно ли…" и др.

Ответы должны содержать не более 2–3 ключевых слов по условию вопроса. Желательно строить ответы одинаковой формы, а если возможно, то и длины. Количественные ответы необходимо упорядочивать, причем первым не должен быть указан правильный ответ. Необходимо исключить возможность выбора ответа интуитивно, догадкой. Ответы должны быть независимы и одинаково привлекательны для выбора.

В тестовых заданиях нельзя использовать сокращения, если задание не расчитано на их знание.

В каждом задании закрытой формы количество дистракторов (вариантов ответов) должно быть от 4 до 6, а в заданиях на установление соответствия – примерно в 2 раза больше. Ни один дистрактор не становится правильным ответом при изменении допустимых условий задания. Повторяющиеся слова и словосочетания в ответах должны быть исключены и перенесены в основную часть условия. Из ответа к одному тестовому заданию нельзя получать каким-либо образом ответ к другому заданию.

Не должен возникнуть вопрос по уточнению условия, дистрактора (или, точнее, подготовленному испытуемому нет необходимости задать вопрос по условию задания преподавателю, а преподаватель может не отвечать на такие вопросы). Задание не должно предполагать знаний, выходящих за пределы учебного материала, программы, образовательного стандарта (особняком стоит очень редко используемое олимпиадное тестирование). Ни один тестируемый не должен получать преимущество перед другим на всем промежутке тестирования.

Количество тестовых заданий в тесте (длина теста) должно составить 30–40 для естественнонаучных дисциплин и примерно в два раза больше – для гуманитарных дисциплин. Впрочем, эта величина зависит от того, какова цель тестирования. Тест, состоящий из меньшего количества заданий можно вполне использовать как обучающий, мотивационный. Автор часто использует экспресс-тестирование на таких тестах при защите лабораторных работ.

Спецификация (описание атрибутов теста – предмет, время разработки, автор и др.) к тесту должна содержать всю информацию, необходимую для проведения тестирования. Нельзя предусматривать в тестовых заданиях необходимость проведения развернутых выкладок. Тест должен быть разработан преподавателем-методистом. Желательно, чтобы тест составила экспертная группа тестологов - предметников, которая и проводит предварительную оценку теста.

Количество заданий в базе данных тестовых заданий должно быть примерно в 10 раз больше усредненной длины теста (т.е. от 200-300 заданий).

Большинство заданий в тесте – закрытой формы. Закрытая форма более быстро воспринимаема и близка ежедневно решаемой человеком проблеме выбора.

Необходимо избегать ненужного дублирования проверяемых знаний, умений и навыков. При формировании тестов полезно проводить предварительное тестирование с целью определения уровня знаний.

Задания в тесте должны быть упорядочены по возрастанию уровня сложности, например, А - легкие, В – средние, С - сложные. Порядок предъявления заданий: все задания

группы А – все задания группы В – все задания группы С.

Возможны следующие варианты предъявления тестовых заданий:

1. от легких заданий – к более сложным;

2. от средних заданий – к более легким или трудным (в зависимости от ответа);

3. от сложных заданий – к более легким и др.

Основными критериями отбора содержания теста являются:

1. соответствие гипотезе тестирования;

2. значимость;

3. правильность;

4. репрезентативность;

5. соответствие современному состоянию науки и методики;

6. сбалансированность содержания теста;

7. тематическая направленность;

8. вариативность содержания;

9. доступность.

2.2. Типовые ошибки разработки тестовых заданий.

Рассмотрим некоторые типовые ошибки составления тестовых заданий на основе тестовых заданий по информатике и новым информационным технологиям.

Они аналогичны (с точки зрения тестологии) ошибкам и в других предметных областях.

Обозначим здесь и ниже тестовое задание с ошибками (тестологии) через T–, ошибки – через О, а откорректированный тест – через Т+.

Т–. Каждый символ при кодировании кодируется одним байтом. Слово "Тестирование" в ЭВМ обычно кодируется комбинацией длины: а) 12 бит. б) 72 бит. в) 96 бит. г) 192 бит.

О. Наличие двух предложений. Неясно, следует ли включать кавычки (как символы) в длину слова. Нестрогое слово "обычно" недопустимо.

T+. "Тестирование" (без кавычек) кодируется по принципу "1 символ – 1 байт" битовой комбинацией длины: а) 12. б) 72. в) 96. г) 192.

Возможен вариант: T+. Слово "Тестирование" (без кавычек) кодируется в ASCII комбинацией длины: а) 12. б) 72. в) 96. г) 192.

Часто формулируют и так: слово Тестирование кодируется по принципу "символ – байт" комбинацией длины… а) 12. б) 72. в) 96. г) 192.

Последний вариант нам кажется менее удачным, как с позиции грамматики русского языка, так и с позиции информатики (пояснения принципа кодировки).

Обратим здесь внимание на необходимость слова "длины". Если убрать это слово, то ответ всегда – 2 бита: любое слово всегда кодируется комбинацией из двух бит (0 и 1).

Каждое слово в тесте – значащее. Лишних слов также не должно быть.

T–. Задуманное число до 500 можно отгадать односложными вопросами, задав их не более: а) 500. б) 50. в) 10. г) 9.

О. Условие не завершено функционально. Понятие "односложное" с точки зрения правил русского языка не требует дополнительного уточнения, но с точки зрения проверяемых знаний и умений (а это принцип бинарного поиска) – предпочтительно пояснить и уточнить.

T+. Задуманное натуральное число до 500 можно отгадать бинарным поиском, задав вопросов не более: а) 500. б) 50. в) 10. г) 9.

T–. Решение системы уравнений:

будет удовлетворять условию: а) x>0, y>0. б)x<0, y<0. в)x>0, y<0. г)x<0, y>0.

О. Ошибки преобразования единиц измерения сообщений или решения системы уравнений, допущенные на любом этапе решения, не всегда приводят к неправильному ответу. Задание не информативно. Неясна, например, причина и не видны некоторые следствия допущенных ошибок.

Т+. Решение системы уравнений:

имеет вид: а)x=1, y=-3. б)x=1, y=2. в)x=-2, y=5. г)x=1, y=-5. Этот тест рассчитан на знание не только единиц измерения сообщений, но и на умение их преобразовывать друг к другу, а на "заключительном участке" – на умение решать системы показательных уравнений. Ошибки, допущенные на любом из этих этапов – существенны и информативны.

Т–. Если рассматривается нижеследующий фрагмент таблицы истинности некоторой функции f(x,y,z)

X	Y	Z	f
0	0	1	0
0	1	1	0
1	0	0	1

то из приведённых ниже функции f(x,y), этой искомой функции может соответствовать только функция, указанная в пункте: а)f=(x)или(y)или(не(z)),б)f=(x)и(y)и(не(z)),в)f=(x)и(y)или(z) ,г)f=(x)и(y)или(не(z))

О. Многословие, излишние слова, особенно это нежелательно в сочетание с таблицами, графиками и т.д.

T+. Фрагменту таблицы истинности вида:

X	Y	Z	f
0	0	1	0
0	1	1	0
1	0	0	1

из приведенных ниже логических функции f(x,y,z) может соответствовать только функция: а) f=(x)или(y)или(не(z)), б)f=(x)и(y)и(не(z)) ,в)f=(x)и(y)или(z) ,г)f=(x)и(y)или(не(z)).

Существенны слова "из приведенных ниже". Без них тест некорректен, допуская множество других функций, отличных от приведенных.

T–. Список основных устройств ввода-вывода персонального компьютера: процессор, сканер, дисплей, диск, плоттер, принтер, мышь, трекбол, клавиатура, регистр, содержит различных устройств ввода информации: а)1. б)3. в)4. г)5.

О. Много ключевых слов задания: "список", "основные", "устройства", "персональный компьютер", "ввод", "вывод", "информация".

T+. Список {сканер, дисплей, диск, плоттер, принтер, мышь, трекбол, клавиатура} содержит устройств ввода: а) 1. б) 3. в) 4. г) 5.

T–. Основные функции операционной системы: а) управление данными к обрабатываемым ЭВМ программам. б) управление программами. в) управление ресурсами.

О. Ответы – не одинаковой длины. Мало дистракторов. Слово "управление" нужно вынести в формулировку задания.

T+. Полный набор основных функций ОС – это управление: а) данными. б) программами. в) ресурсами. г) данными, программами и ресурсами.

Впрочем, нужно стараться избегать ответов типа г).

T–. Фрагмент: s:=0;x:=1: нц пока(x<5);s:=s+x; x:=x+1: кц ,вычисляет значение s равное: а) 10. б) 32. в) 31. г) 63.

О. Правильный ответ легко вычисляется и стоит первым в списке неупорядоченных по возрастанию или убыванию вариантов ответов.

T+. Фрагмент:s:=0;x:=1; нц пока(x<5); s:=s+x;x:=x+1; кц; вычислит s равное: а) 63. б) 32. в) 31. г) 10.

T–. В синтаксической конструкции: нц пока <предикат><команда>….; пропущено ключевое слово: а) до, б) кц, в) если, г) все

О. Наличие в условии задания нц подсказывает правильный ответ, даже если не понимется смысл этого ключевого слова и смысл самой конструкции, на что и направлено тестовое задание.

T+. В синтаксической конструкции: нц…<предикат><команда>кц; пропущено ключевое слово: а) до, б) пока, в) если, г) для.