4.1. Задания избирательного типа. При их подготовке важно учитывать целый ряд требований.
4.1.1. Формулировка задания.
· Задание должно быть сформулировано в полном соответствии с целью тестирования.
· Задание должно содержать только один вопрос.
· Формулировка задания должна быть законченной, что обеспечит ему однозначность понимания и выполнения.
· Формулировка задания должна быть простой: проверке подлежит понимание явления, находящегося вне формулировки самого задания.
· Задания не должны пересекаться: выполнение одного не должно зависеть от выполнения другого.
· Формулируя задания, следует, по возможности, употреблять
۰ нейтральную лексику
۰ простой синтаксис
۰ короткие, но обязательно законченные формы инструкций
۰ утвердительные конструкции
۰ имена объектов, а не ссылки на них в виде, например, местоимений.
4.1.2. Формулировка вариантов ответа.
· Количество дистракторов (вариантов неправильных ответов) должно быть не менее двух, оптимальное количество – правильный ответ + три дистрактора.
· Предлагаемые варианты должны удовлетворять требованиям
◦ (1) лингвистической правильности (все варианты должны иметь правильную языковую форму)
◦ (2) тематической корректности (все варианты должны соответствовать предлагаемой теме)
◦ (3) лингвистической доступности (языковые средства, используемые в формулировке, должны соответствовать контролируемому уровню языковой сложности)
◦ (4) синтаксического параллелизма (все варианты должны иметь единообразное синтаксическое оформление)
◦ (5) количественной уравновешенности (количество слов не должно существенно отличаться)
◦ (6) качественной уравновешенности (одинаковая точность или полнота формулировки для всех вариантов)
◦ (7) гипотетической избираемости (дистракторы не должны быть абсурдными или явно ложными)
◦ (8) различимости (все варианты должны быть легко различимы между собой как по форме, так и по содержанию)
◦ (9) автосемантичности (все варианты должны быть понятны независимо друг от друга и не содержать дословного повтора текста)
◦ (10) локальной независимости (не содержать подсказки к другим заданиям и/или не зависеть от них).
4.1.3. Процедура подсчета баллов, как правило, проста и очевидна: за каждый правильно выбранный ответ дается 1 балл. Именно на этом основании часто делаются выводы об объективности такого рода тестирования. На самом деле объективность получаемых результатов обеспечивается тщательным подбором дистракторов и предварительной апробацией теста.
4.2. Задания, предполагающие свободно конструируемые ответы. К ним относятся:
- ответы на вопросы закрытого (краткий ответ) и открытого (развернутый ответ) типа
- внутриязыковое перефразирование (относится к наиболее продуктивным типам заданий, требует от составителя четкой формулировки задания).
Задания этого типа используются, наряду с заданиями избирательного типа, при составлении вопросников для проверки коммуникативной компетенции на рецептивном уровне: это понимание устных и письменных текстов.
При подготовке заданий со свободно конструируемыми ответами, основным требованием является четкость и однозначность формулировки задания. Желательно указать в задании количество баллов, которое дается за правильный ответ. Как правило, оно соответствует количеству информативных составляющих ожидаемого ответа. В случае учета лингвистической составляющей количество баллов надо увеличить, указав это в задании.
Следует помнить, что в рамках компетентностного подхода критерии оценивания и формулировка задания тесно взаимосвязаны, что и обеспечивает тестируемому условия, необходимые для эффективного выполнения предлагаемого задания.
4.2.1. Задания, требующие краткий ответ.
Выполняя задание закрытого типа тестируемый должен дать краткий ответ. Формулировка задания должна нацеливать на поиск конкретной информации. Ключевыми словами в таких заданиях будут: relevez, dégagez, retrouvez, вопросительные слова quand? où? qui? quoi? de quelle manière?. Можно, а в ряде случаев и нужно, уточнять ее локализацию в тексте (dans le premier paragraphe), отсылать к ее источнику (l’invité, les sondés).
Например, вопрос Quels avantages accorde-t-on aux enseignants? не удовлетворяет указанным выше требованиям: он не содержит ориентиров для поиска информации. Переформулируем его, чтобы сделать поисковым: En relisant le 3e paragraphe, relevez 2 avantages qu’on accorde aux enseignants dont. (2 points)
Другой пример: вместо вопроса Pourquoi les automobilistes sont-ils mécontents? для получения краткого ответа лучше предложить формулировку Selon Laurence Armorial, les automobilistes sont mécontents pour 3 raisons essentielles. Lesquelles? (3 points)
При проверке кратких ответов оцениванию подлежит правильность выбранной информации. Например: задание Relevez trois méthodes d’apprentissage de la lecture mentionnées dans le texte. (3 points) предполагает ответ: 1) (méthode) syllabique 2) (méthode) globale 3) (méthode) mixte ou semi-globale. Слово méthode в ответе не является обязательным. В последнем случае достаточно указать только одно название метода, например, mixte. Порядок представления методов значения не имеет и на оценку не влияет. Орфографические ошибки не снижают оценки.
4.2.2. Задания с развернутым ответом.
Выполняя задание открытого типа тестируемый должен дать развернутый ответ. Например: задание Dans le texte on évoque les événements de mai 1968. Rédigez-en une note pour expliquer ce que c’est et quels en sont les résultats (20-30 mots). 2 (contenu) + 1 (correction linguistique) = 3 points
Можно принять, оценив его в 3 балла, следующий ответ из конкурсной работы: En mai 1968 le mouvement révolutionnaire des étudiants français a eu lieu. Ils ont bouleversé tous les domaines de la vie, d'où l'importance de cette date dans l'histoire de la France. (31 mots)
4.2.3. Система оценивания.
При оценивании развернутых (свободных) ответов существуют два возможных подхода:
· Оценке подлежит только информативный компонент ответа. В том случае, когда в ходе проверки имеет место адекватное смысловое декодирование сообщения, языковые ошибки не учитываются. В приведенном примере это 2 баллa: 1) quoi? mouvement révolutionnaire, 2) résultats: changements obtenus.
· Оценке подлежит не только информативный компонент ответа, но и качество языковой реализации. В этом случае для оценки языкового компонента можно рекомендовать бонусный метод, то есть прибавление баллов за правильную орфографию и лексико-грамматическое оформление ответа[4]. Количество бонусных баллов составляет, как правило, 30-50% от баллов, оценивающих информативный компонент ответа. Можно также оценить этот ответ в 3 балла, доведя до сведения конкурсантов, что один балл дается за лингвистическую правильность.
Таким образом, ориентируясь на указанные в задании баллы конкурсанты смогут: 1) определять объем запрашиваемой информации, чем облегчат себе ее поиск в тексте, 2) классифицировать вопросы на простые и сложные, что позволит им выбрать оптимальную стратегию обработки текста, а также 3) разумно относиться к возможным языковым ошибкам.
4.3. Творческие задания: формулировка и критерии оценивания
Разрабатывая задания творческого типа, следует помнить, что в условиях решения проблемных задач речь (как устная, так и письменная) протекает по модели ориентировочно-исследовательской деятельности. Иначе говоря, речевое порождение ставит говорящего/пишущего перед необходимостью искать оптимальные дискурсивные стратегии для решения поставленной задачи. Для этого ему необходимо понимать характер своих взаимоотношений с адресатом, представлять себе ту роль, которую предстоит исполнить в предложенной ситуации, локализовать ее на временной оси, связав как с прошлым, так и с будущим. Задавая условия для выработки адекватной дискурсивной стратегии, формулировка задачи должна содержать необходимые «правила игры», к которым относятся:
- ситуативные параметры (ответ на основные вопросы: кто? что? для кого? когда? где? зачем?)
- дискурсивные параметры (речевые акты: пригласить, отказаться от приглашения, выразить согласие/несогласие с обсуждаемой точкой зрения, аргументировать свою позицию за/против, привести примеры и т.д.).
Сравним две формулировки заданий.
1. Écrivez une lettre à votre ami français pour lui parler de vos projets de grandes vacances.
2. L’été dernier vous avez séjourné chez Claude, votre ami français. En partant vous l’avez invité de venir chez. Vous venez de recevoir sa lettre où il vous demande de confirmer votre invitation pour mettre au point ses projets de vacances. Vous lui répondez que vous pouvez/ne pouvez pas le recevoir cet été. Si oui, précisez les dates qui vous conviennent le plus, posez-lui des questions sur ce qu’il voudrait faire, visiter, connaître. Proposez des activités qui vous paraissent intéressantes. Si non, donnez-lui une explication de votre refus. Dites ce que vous ferez pendant vos vacances. (150-170 mots)
В первом случае задание формулирует тему, а не проблему: в нем не указаны параметры коммуникативной ситуации, не сформулированы условия для выбора дискурсивной стратегии, отсутствует объем ожидаемой продукции.
Вторая формулировка раскрывает характер взаимоотношений между пишущим и его адресатом. Момент написания письма связан как с общим для коммуникантов прошлым, так и с будущим. Пишущий выбирает (приглашение/отказ) и решает реальную коммуникативную задачу. Объем письма также обязывает его сосредоточиться на изложении основной, прагматически необходимой, информации.
Такая формулировка позволяет преподавателю разработать четкие и объективные критерии оценки, а испытуемому спланировать свою речевую продукцию в соответствии с поставленной задачей и заложенными в задании критериями оценки.
В целом оценка продуктивной речевой деятельности складывается из двух равновеликих по баллам блоков: дискурсивная техника (50%) и языковая правильность (50%).
Конкретные формулировки заданий и связанные с ними критерии оценок представлены в вариантах заданий, которые даны ниже (см. разделы 5.4. и 5.5.).