Прежде чем рассматривать другие пути повышения содержательной валидности контроля, остановимся на функциональной валидности.
Функциональная валидность' может быть раскрыта как соответствие контрольного задания тому познавательному действию, которое подлежит контролю. Одни и те же предметные знания могут быть использованы в различных видах деятельности, поэтому при разработке контрольных заданий необходимо руководствоваться содержанием целей обучения: составлять такие задания, выполнение которых требует использования специфических и логических приемов познавательной деятельности, предусмотренных целями обучения. Для того чтобы выполнить требования одновременно содержательной и функциональной валидности, необходимо предварительно проанализировать как систему предметных знаний, так и систему предусмотренных целями специфических и логических приемов познавательной деятельности. В результате этой работы должны быть определены связи между тремя указанными составляющими: знаниями, специфическими и логическими приемами познавательной деятельности. Только после этого могут быть разработаны задания, требующие применения данных знаний в контролируемых видах деятельности. Для удобства работы знания, специфические и логические приемы познавательной деятельности можно свести в таблицу:
В левой части таблицы по вертикали располагаются основные знания, составляющие контролируемый раздел. В правой части таблицы по горизонтали арабскими цифрами обозначены познавательные действия, характерные для данного предмета (грамматические, математические, природоведческие и т.д.), в которых (согласно целям обучения) контролируемые знания должны использоваться учащимися. Аналогично буквами обозначены логические приемы, подлежащие контролю в данном разделе предмета. Знаком «+» обозначено, в какой конкретной деятельности будет контролироваться то или иное знание. В соответствии с заполненной таблицей и составляются контрольные задания.
1 Этот вид валидности нередко называется конструктной (от слова «конструкт», который в конечном итоге состоит из той или иной системы познавательных действий)
Анализируя практику контроля в школе, нетрудно заметить, что ни один из указанных видов валидности не реализуется в должной мере.
Увеличивая число заданий как путь повышения валидности контроля, нельзя забывать, что цель будет достигнута только тогда, когда эти задания будут полней охватывать не только содержание предметных знаний, но и систему предусмотренных видов познавательной деятельности. Более того, реализуя требования содержательной и функциональной валидности, необходимо помнить, что одни и те же действия и знания можно усвоить с разными показателями.
Таким образом, при составлении контрольных заданий необходимо проконтролировать не только виды деятельности, но и их качества, с которыми они сформированы.
Для контроля за качеством сформированных действий и входящих в них знаний не всегда требуется составление дополнительных заданий: надо просто увеличить число показалей, которые учитываются при выполнении задания. В самом деле, выполнение любого задания может быть оценено не только как правильно или неправильно выполненное, но и по быстроте, по форме выполнения (в уме или с использованием внешних опор). Вместе с тем повышение степени валидности контроля неизбежно приводит к увеличению числа контрольных заданий. Однако было бы неверно думать, что это единственный путь решения данной проблемы. В нашей стране разработан и другой путь.
В.М. Полонский связывает повышение валидности контроля с использованием так называемого синтезированного метода контроля знаний. Он основывается на том, что в каждом учебном предмете существуют исходные понятия и понятия, которые строятся на их базе. Так, понятие угол включает такие понятия, как точка, луч. Аналогично положение и с формируемой деятельностью. Надо найти деятельность, синтезирующую, включающую значительное число более частных видов. Например, решение любой арифметической задачи предполагает усвоение тех или иных арифметических действий. Но задача требует от ученика и ряда дополнительных умений: анализа словесных условий, выражения их на языке арифметики и т.д.
В.М. Полонский доказал, что можно заменить контроль отдельных понятий и связанных с ними видов деятельности контролем через задания, требующие выполнения синтезированной деятельности. Был проведен эксперимент, в котором приняли участие 50 учащихся. Им были даны задания двух видов: 5 заданий, требующих синтезированной деятельности, и 30 заданий, контролирующих знания по данной теме с помощью частных видов деятельности. Эксперимент показал, что учащиеся, выполнившие все синтезированные виды деятельности, смогли успешно выполнить более 90% и частных видов заданий. Учащиеся, которые не смогли выполнить некоторые виды синтезированных заданий, не смогли выполнить и те частные виды деятельности, которые вобрала в себя синтезированная деятельность.
Аналогичные данные были получены и на 112 студентах, где контроль проводился по одной из тем курса химии для высшей школы.
Очевидно, что работа в данном направлении позволит существенно повысить валидность контроля и одновременно избежать чрезмерного увеличения количества предъявляемых заданий.
Надежность контроля понимается как устойчивость результатов, получаемых при повторном контроле. Естественно, что это понятие относительно: с течением времени качество усвоенных знаний может меняться. Вместе с тем в случае надежного контроля его результаты должны быть близкими при проведении контроля разными преподавателями на данном этапе обучения.
К сожалению, в школьной практике контроль, как правило, не является надежным Ученик, который по тому или иному разделу получил хорошую оценку, нередко через три-четыре дня уже не может подтвердить эту оценку, если его проконтролировать повторно без предупреждения и, следовательно, без дополнительной подготовки по этой теме.
Между валидностью и надежностью контроля существуют определенные зависимости. Если контроль имеет достаточную степень содержательной и функциональной валидности, то он будет и надежным. И это не случайно: контролю подвергаются такие элементы знаний и такие виды познавательной деятельности, которые свидетельствуют об усвоении всей системы знаний и соответствующих им видов деятельности, предусмотренных целями обучения.
Однако из надежности контроля не следует его валидность. В самом деле, контроль и в первом, и в последнем случае может касаться одних и тех же единичных знаний, одних и тех же видов деятельности. В силу этого он может дать идентичные результаты, т.е. оказаться надежным. Но и в первом, и во втором случае контроль мог не охватить всего объема знаний, поэтому полученные результаты не могут быть рассмотрены как показатели усвоения всего объема материала. Следовательно, контроль не удовлетворяет требованиям содержательной валидности.
Аналогично контроль мог быть проведен не по тем видам деятельности, которые предусмотрены целями обучения, и поэтому не обладать функциональной валидностью.
Автоматизация итогового контроля знаний. Проблема автоматизации итогового контроля может быть рассмотрена с двух сторон: во-первых, со стороны разгрузки преподавателя, во-вторых, со стороны повышения качества контроля.
В первые годы применения различных контролирующих устройств в нашей стране было распространено мнение, что технические средства одновременно решают обе проблемы. В частности, считалось, что автоматизированный способ контроля повышает надежность, обеспечивает объективность оценки. Однако постепенно обнаружилось, что внедрение средств автоматизации само по себе не только не повышает качества контроля, а наоборот, может приводить к его ухудшению. В частности, эмпирическое, научно не обоснованное использование выборочного типа ответов привело к резкому падению функциональной валидности контроля вместо контроля за приемами мыслительной деятельности нередко имел место контроль механической памяти; вместо контроля за методом решения задачи был контроль за продуктом случайного угадывания.
Оказалась не ликвидированной и субъективность в оценке знаний. Так, был проведен эксперимент по контролю знаний у одних и тех же учащихся по одному и тому же курсу последовательно, с помощью нескольких контролирующих устройств. Программа контроля для этих устройств разрабатывалась разными преподавателями. Естественно, что каждый преподаватель заложил в программу свое понимание валидности контроля, свои нормы оценок. В результате каждый из учащихся получил несколько разных оценок.
Эти факты приводятся для того, чтобы подчеркнуть важность научной обоснованности любого контроля. Следует также отметить, что применение контролирующих устройств позволяет избежать неравенства требований по отношению к отдельным учащимся.
Однако были обнаружены и такие отрицательные особенности использования автоматизированного контроля, которые не могут быть сняты путем улучшения качества контролирующих программ. Оказалось, что обучаемые предпочитают иметь дело с машиной, когда идет процесс обучения: пока они совершают ошибки, выполняют задания недостаточно быстро и качественно. Но когда они хорошо подготовлены и встает вопрос об автоматизированном итоговом контроле, учащиеся остаются неудовлетворенными, успешно сдав экзамен: похвала машины им недостаточна, им важно продемонстрировать свои успехи перед «себе подобным». Здесь мы имеем дело с чисто психологическим явлением, отражающим социальную природу человека и автоматизируя различные звенья учебного процесса, в том числе контроль, мы должны помнить об этой человеческой особенности.