Мониторинг качества обучения письменной речи (французский язык как второй иностранный)

- Vocabulaire thйmatique. В этом блоке представлена вся лексика по заданной тематике, а также задания, направленные на обучение аудированию.

- Crammaire. Несколько разворотов посвящены в основном повторению и обобщению грамматического материала, изученного в предыдущие годы обучения. В основном это те грамматические темы, которые не имеют аналогов в родном языке и вызывают трудности в освоении.

- Civilisation. Страницы этого раздела знакомят учащихся с разнообразным культуроведческим материалом.

- Franзais pratique. Материалы этой рубрики дают возможность учащимся познакомиться с повседневной жизнью французского общества. Эта рубрика не только расширяет знания о стране изучаемого языка, знакомит с реалиями повседневной жизни, но и дает возможность узнать стиль жизни французского общества.

- Je lis la presse pour ... comprendre. В этом разделе учебника представлены фрагменты из публицистических текстов. Переводы наиболее трудных для понимания слов и выражений даются на полях. Работа с текстами предполагает их детальное понимание. Задания после текстов позволяют расширить лингвистические знания учащихся.

- Plaisir de lire. В этой рубрике представлен широкий диапазон аутентичных текстов: объявления, расписания, письма читателей в молодежные журналы, опросы общественного мнения. Задания направлены на расширение лингвистических знаний учащихся, на проверку понимания прочитанного.

- Interview. Материалы этой рубрики дают возможность учащимся усовершенствовать умения и навыки говорения (монологической и диалогической речи).

Таким образом, рассмотрев классификации объектов контроля по А. Н. Щукину и Е. В. Мусницкой, письмо, как вид речевой деятельности, государственный образовательный стандарт, требования, предъявляемые регионального этапа всероссийской олимпиады школьников по французскому языку в 2007/2008 учебном году, итоговой государственной аттестации, а также УМК, на основе которого ведётся вся работа по созданию базы нестандартизированных критериально-ориентированных тестов, выделены объекты контроля - следующие умения письменной речи на основном этапе обучения французскому языку как второму иностранному языку в средней (полной) общеобразовательной школе:

- умение написать личное письмо

- уменние составить развернутое монологическое высказывание

Данные объекты и необходимо учитывать при составлении банка нестандартизированных критериально-ориентированных тестов для контроля письменной речи по завершению основного этапа обучения французскому языку как второму иностранному языку в средней (полной) общеобразовательной школе. Определившись с объектами контроля, необходимо рассмотреть объективную форму контроля. В следующем параграфе рассматривается тест, как один из наиболее эффективных видов контроля письменной речи.

1.4 Тестирование как объективная форма контроля письменной речи на базовом уровне обучения французскому языку как второму иностранному языку в средней (полной) общеобразовательной школе

Итак, контроль и оценка уровня владения иностранным языком являются важнейшим компонентом учебного процесса. Основная задача контроля -- объективное определение уровня владения обучаемыми иноязычным материалом на каждом этапе становления их речевых навыков и умений, при этом объектом контроля является как языковая форма сообщения, так и его содержание. Контроль представляет собой сложное диалектическое целое, в котором тесно переплетаются деятельность учителя и ученика.

Систему контроля составляют также формы контроля, или способы деятельности учителя и учащихся, в ходе которых выявляется овладение учащимися требуемыми знаниями, навыками и умениями. В обучении иностранным языкам при проведении итогового контроля традиционно используются следующие формы: защита рефератов, зачет, собеседование, итоговый опрос (устный или письменный), письменная контрольная работа, экзамен.

Рассмотрим каждую из них.

Опрос. Это хорошо известная, широко распространенная форма итогового контроля, вариант текущей проверки, органически связанный с ходом занятия.

Фронтальный опрос - это такой тип урока, на котором, как правило, учитель опрашивает учащихся всей группы, отвечающих со своих мест.

Индивидуальный опрос проводится как и фронтальный опрос, преимущественно в устной форме. Эта форма контроля так же является широко распространенной, причем один и тот же учащийся может быть спрошен дважды на одном уроке.

Комбинированный опрос, сочетающийся с индивидуальным и фронтальным. В этой форме задания вопрос адресуется не только тому ученику, который будет опрашиваться индивидуально, но и всем остальным учащимся группы.

Взаимный опрос - вид опроса, получивший большое распространение в последнее время, - заключается в парной работе учащихся, которые одновременно тренируются и контролируют друг друга.

Контрольная работа. Данная форма контроля является экономичной как в плане одновременного охвата проверкой всех учащихся группы за один и тот же отрезок учебного времени, так и с точки зрения возможностей обработки и получения обозримых результатов для последующего анализа и методических данных.

Различают устные контрольные работы (как вариант фронтального опроса), так и письменные контрольные работы.

Экзамен. Данная форма контроля направлена на отражение действующих программ. Поскольку ее значимость весьма относительна, а проблема при обучении иностранному языку разработана научно неудовлетворительно, представляется возможным не останавливаться на этой форме контроля. [37; с. 28-32.].

Однако эти традиционные формы контроля результатов обучения основаны на экспертной оценке преподавателя, которая часто носит субъективный характер. Несмотря на рекомендуемые общие критерии оценки, уровень требований различных преподавателей совершенно индивидуален. У каждого имеется свое понимание принципов требовательности и справедливости, свои критерии качества знаний, навыков и умений. На оценку преподавателя влияют и предыдущий процесс общения с обучаемым, и его личностные установки по отношению к оцениваемому ученику. Определенное воздействие оказывают внешний вид ученика, его умение ясно излагать свои мысли, а также ряд других факторов, условно называемых «эмоциональной составляющей». Традиционная система контроля и оценки в силу своих организационных и технологических особенностей не позволяет получить независимую, объективную, сопоставимую информацию об уровне подготовки учащихся. Одной из форм контроля, позволяющей измерить уровень обученности, получить достоверные, надежные данные и обеспечить объективную оценку, является педагогическое тестирование.

Одним из направлений модернизации, проводимой в российской средней (полной) общеобразовательной школе, является создание независимой от органов управления образованием государственной системы оценки качества образования, которая должна способствовать повышению эффективности образовательной деятельности.

Для получения объективных показателей качества обучения в стране вот уже в течение 7 лет продолжается эксперимент по использованию стандартизованных процедур оценки учебных достижений, т. е. педагогическое тестирование.

Педагогическое тестирование предполагает создание научно обоснованных контрольных измерительных материалов (или КИМов), отвечающих требованиям валидности, надежности, экономичности.

С 2008 года в регионах Российской Федерации в рамках создания Общероссийской системы оценки качества образования производится государственная итоговая аттестация выпускников 9-х классов (в новой форме). Несмотря на то что экзамен в новой форме пока проводится в режиме эксперимента, число регионов, реализующих эту форму итогового контроля, неуклонно растет.

Введение в практику новой модели экзамена для выпускников основной школы продиктовано необходимостью совершенствования форм итогового контроля с учетом принципа вариативности. Увеличения числа таких форм - положительная тенденция современной системы общественного образования, и экзамен в 11-ом классе в новой форме, безусловно, займет достойное место наряду с традиционными письменными экзаменами по русскому языку и алгебре, устными экзаменами по билетам, защитой реферата или проектной работой и другими.

Задача новой модели экзамена особенно актуальна в связи с введением в средней школе профильного обучения, позволяющего более полно учитывать интересы, склонности и способности учащихся и требующего объективных оснований для зачисления учащихся в различные по профилю классы.

Задания для государственной итоговой аттестации выпускников 11-х классов (в новой форме) и варианты экзаменационных работ разрабатываются специалистами Федерального института педагогических измерений (ФИПИ). При подготовке экзаменационных материалов для 11 класса используются, и творчески перерабатывается огромный опыт федеральных предметных комиссий ФИПИ по разработке контрольных материалов ЕГЭ

Основными преимуществами тестирования ЕГЭ являются:

- единые для всей страны требования;

- отсутствие субъективизма, независимость итоговой оценки выпускника от мнения учителя или учебного заведения;

- высокая точность измерений.

Этот метод оценки, прежде всего, используется для итоговой аттестации школьников на этапе перехода от общеобразовательной школы к высшей и называется Единым государственным экзаменом, который проводится централизованно, по единым для всех учащихся измерительным материалам. Целью этого экзамена является определение уровня обученности учащихся по предмету, задаваемого стандартом по иностранным языкам (критериальный аспект), и дифференциация их по уровню подготовки для отбора при поступлении в высшие учебные заведения (нормативный аспект).

Специфика учебного предмета «Иностранный язык», а именно его направленность на межличностное и межкультурное взаимодействие/общение, его многоуровневый и многоцелевой характер, включающий различные виды речевой деятельности: говорение, слушание (аудирование), чтение, письмо и/или письменную речь; языковые средства (фонетические, лексические, грамматические) и социокультурные знания и навыки, а также интегративность содержания иноязычного общения, затрагивающего различные сферы общения (семейно-бытовую, учебно-трудовую, социально-культурную и др.), обусловливает выбор объектов контроля разного уровня сложности при проведении итоговой аттестации выпускников.

Таким образом, основными объектами контроля являются указанные выше виды речевой деятельности (речевая компетенция), языковые знания и навыки (языковая компетенция), социокультурные знания и навыки (социокультурная компетенция), которые составляют интегративную цель обучения -- коммуникативную компетенцию.

Как известно, ЕГЭ по французскому языку для 11 класса за 2009 - 2011 годы включают четыре раздела: "аудирование", "чтение", "грамматика и лексика", "письмо". К заданиям первых трех разделов даны ответы, а для заданий четвертого раздела приведены схемы и критерии оценивания.

Экзаменационная работа по французскому языку состоит из четырёх

разделов, включающих 46 заданий.

Раздел 1 (Аудирование) включает 15 заданий, из которых первое - на установление соответствия и 14 заданий с выбором одного правильного ответа из трёх предложенных. Рекомендуемое время на выполнение Раздела 1 - 30 минут.

Раздел 2 (Чтение) включает 9 заданий, из которых 2 задания на

установление соответствия и 7 заданий с выбором одного правильного ответа из четырёх предложенных. Рекомендуемое время на выполнение Раздела 2 - 30 минут.

Раздел 3 (Грамматика и лексика) включает 20 заданий, из которых 13 заданий с кратким ответом и 7 заданий с выбором одного правильного ответа из четырёх предложенных. При выполнении заданий с кратким ответом вы должны самостоятельно записать ответ в соответствующем месте работы. Рекомендуемое время на выполнение Раздела 3 - 40 минут.

Раздел 4 (Письмо) состоит из двух заданий и представляет собой

небольшую письменную работу (написание личного письма и письменного высказывания с элементами рассуждения). Рекомендуемое время на выполнение этого раздела работы - 60 минут. Черновые пометки делаются прямо на листе с заданиями (они не оцениваются), и только полный вариант ответа заносится в Бланк ответов № 2.

Общее время проведения экзамена - 160 минут.

Таким образом, экзаменационная работа по французскому языку состоит из двух частей (письменной и устной) и включает 46 заданий. Сначала выполняется письменная часть. На её выполнение отводится 1,5 часа (90 мин). В этой части работы предлагается выполнить 23 задания.

Структура экзаменационной работы по французскому языку состоит из двух частей: письменной и устной, различающихся назначением, содержанием, типами заданий. Речевая компетенция учащихся в аудировании, чтении и письме, а также языковая компетенция (лексико-грамматические навыки) проверяются в письменной форме.

Социокультурные знания, навыки и умения проверяются опосредованно через содержание текстов для аудирования и чтения, а также через тематику устной и письменной речи. Важно при этом умение учащихся соблюдать нормы устной и письменной речи, принятые в стране изучаемого языка.

Для дифференциации выпускников по уровню владения французским языком и для отбора в вузы в обе части экзаменационной работы помимо заданий базового уровня включаются задания повышенного и высокого уровня сложности в соответствии с Государственным образовательным стандартом (базовый и профильный уровни). Уровень сложности заданий определяется уровнями сложности языкового материала и проверяемых умений, а также типом задания.

В данном исследовании внимание акцентируется на итоговом контроле умений письменной речи, реализация которых в полном объёме осуществляется в ЕГЭ по иностранному языку в разделе 4 «Письмо».

В разделе 4 (задание по письму) предусмотрено 1 задание, предлагающее написать личное письмо. Черновые пометки делаются ,непосредственно на листе с заданиями (они не оцениваются), полный вариант письменного ответа записывается на отдельном листке.

Рекомендуемое время на выполнение - 60 минут. Задание С1 - это задание базового уровня и за его выполнение учащийся может максимально потратить 20 мин. Эксперты оценивают выполнение задания С1 по критериям:

1.Содержание и 2. Организация текста;

задание С2 - по всем пяти критериям:

1. Содержание; 2. Организация текста; 3. Лексика; 4. Грамматика;

5. Орфография.

Критерий Орфография и пунктуация в разделе «Письмо» оценивается в 2 балла. При получении экзаменуемым 0 баллов по критерию «Содержание» всё задание оценивается в 0 баллов.

Раздел 4 «Письмо» включает два задания со свободно конструируемым ответом и, в целом, представляет собой небольшую письменную работу, состоящую из 2 заданий. Первое задание (С1) - личное письмо объемом 100-140 слов, в котором проверяются умения как базового уровня (умение правильно оформить неофициальное письмо, умение сообщить некоторую информацию о себе), так и повышенного уровня сложности (умение дать развернутые ответы на вопросы и запросить информацию). Второе задание (С2) - развернутое письменное высказывание с элементами рассуждения по предложенной проблеме объемом 200-250 слов -- высокого уровня сложности. Оба задания, С1 и С2, базируются на тематике общения, составляющей основу школьной программы. Это социально-бытовая сфера (общение в семье и школе, межличностные отношения с друзьями и знакомыми); социально-культурная сфера (досуг молодежи; страны изучаемого языка; вклад России и стран изучаемого языка в развитие науки и культуры); учебно-трудовая сфера (современный мир профессий, рынок труда; возможности продолжения образования в высшей школе в России и за рубежом; новые информационные технологии).

Задание С1 - это задание базового уровня и за его выполнение учащийся может максимально получить 6 баллов; задание С2 - это задание высокого уровня и за его выполнение учащийся может максимально получить 14 баллов. Таким образом, раздел «Письмо» в целом оценивается максимально в 20 баллов. Вследствие изменений, внесенных в спецификацию ЕГЭ 2009/10 г. (удаление раздела «Говорение»), удельный вес раздела «Письмо», как и других разделов работы, вырос по сравнению с прошлыми годами и составляет в 2009/10 г. 25% от максимального тестового балла (100 баллов). Эти изменения повышают важность раздела «Письмо» как единственного раздела, содержащего задания со свободно конструируемым ответом.

Таким образом, раздел «Письмо» в целом оценивается максимально в 20 баллов.

Как мы уже знаем, ЕГЭ представляет собой эксперимент по использованию стандартизованных процедур оценки учебных достижений, т.е. педагогическое тестирование.

«Тестирование», по мнению исследователя В.А. Коккоты, представляет собой «совокупность процедурных этапов планирования, составления и опробования тестов, обработки и интерпретации их результатов». [23, с.127] Известно, что «тестирование» в широком значении включает в себя отдельные самостоятельные этапы: разработку теста, апробацию теста, проведение тестовых испытаний, оценку индивидуальных результатов в упорядоченном списке, анализ результатов и выработку рекомендаций. (Романов В.А., 1989) Именно тестирование позволяет осуществить раздельный адекватный контроль по видам речевой деятельности, обеспечивает качественную проверку языковых и речевых навыков и умений.

Фоменко Т.М. считает, что под тестированием в широком смысле имеют в виду совокупность всех процедурных этапов, а именно: планирование, составление, апробация, обработка и интерпретация результатов первичного, предварительного теста -- предтеста, перепланирование, оформление и подготовка спецификаций, инструкций окончательного теста.

Педагогическое тестирование предполагает создание научно обоснованных контрольных измерительных материалов (КИМов), отвечающих требованиям валидности, надежности, экономичности.

Валидность означает пригодность тестовых результатов для той цели, ради которой проводилось тестирование. Если тест позволяет проверить все то, что задумано авторами, он считается валидным относительно контролируемого содержания обучения. Валидность зависит от качества заданий, от степени полноты и глубины охвата содержания обучения в заданиях теста.

Надежность отражает степень постоянства, стабильности результатов тестирования. Надежным считается тест, который дает устойчивые результаты при повторном предъявлении при условии, что уровень подготовки испытуемых не изменился.

Экономичность теста -- возможность конкретного теста дать максимум достоверной информации о тестируемом при минимальных затратах времени и усилий на составление, проведение, проверку и обработку теста.

По отношению к традиционным формам контроля исследователь Сергеева И.Ф. выделяет следующие преимущества тестирования:

ѕ индивидуальный характер контроля. Возможность осуществления контроля над работой каждого ученика, за его личной учебной деятельностью;

ѕ возможность регулярного проведения тестирования на всех этапах процесса обучения;

ѕ возможность сочетания его с другими традиционными формами педагогического контроля;

ѕ объективность, исключающая часто ошибочные выводы учителя, основанные на недостаточном изучении уровня подготовки учащихся или предвзятого отношения к некоторым из них;

ѕ возможность применения многообразных форм заданий;

ѕ учет индивидуальных особенностей, специфичной выборке испытуемых, требующей применения различных методики разработки теста и тестовых заданий;

ѕ единство требований ко всем испытуемым, вне зависимости от их прошлых достижений;

ѕ эффективность тестов, позволяющая проводить контроль за короткий промежуток времени с минимальными затратами;

ѕ возможность за определенный промежуток времени проверить большой объем материала у большой группы испытуемых;

ѕ применение контроля на необходимом уровне, измерение степени сложности заданий, включая в качестве вариантов ответов типичные ошибки;

ѕ создание условий для постоянной обратной связи между учеником и учителем;

ѕ применение единых критериев и интерпретаций тестов.

В узком смысле тестирование есть форма контроля (и обучения) с помощью проведения и использования теста, поэтому подробнее рассмотрим понятие «тест».

Термин «тест» был введен в научный обиход американским психологом Дж. Кеттеллом в 1890 г. для наименования психологических проб, т. е. специально разработанных стандартизированных методик, с помощью которых пытались измерить различия между индивидами или реакциями одного индивида в разных условиях. Однако ни в психологии, ни в других научных областях (социологии, педагогике, медицине, физиологии, вычислительной технике) все еще нет единого определения термина.

Слово «тест» в английском языке означает «испытание», «эксперимент», «проверка», «проба». При такой полисемии терминологические неточности очевидны.

Иногда тест трактуется чрезвычайно широко: под ним понимаются и простые контрольные работы, и контрольно-тренировочные упражнения, и собственно процесс контроля, а также все взятое вместе.

В обучении иностранным языкам используются языковые, или лингводидактические, тесты. Термин «лингводидактический тест» введен В.А. Коккотой, который соотносит лингводидактический тест с комплексом заданий:

-- задания, подготовленные в соответствии с определенными требованиями;

-- задания, прошедшие предварительную апробацию с целью выявления показателей качества;

-- задания, позволяющие определить у тестируемых степень их языковой (лингвистической) и/или речевой (коммуникативной) компетенции;

-- задания, результаты которых поддаются определенной оценке по заранее установленным критериям.

Данное определение охватывает важнейшие характеристики лингводидактического теста: цель и объект контроля, системообразующие признаки теста, способ интерпретации результатов.

Исследователь Фоменко Т.М. дает следующее определение термину «тест» -- базовый компонент других понятий, связанных с идеей измерений способностей, свойств, достижений личности.

Специфика и преимущество теста как формы контроля заключается в следующем:

1. Тест проводится в равных для всех испытуемых условиях: они работают с одинаковым по объему и сложности материалом в одно и то же время.

2. Тест характеризуется квалиметрическими качествами, т. е. количественным выражением качества выполнения задания. Результаты выполнения заданий теста сравниваются с заранее подготовленными эталонами (ключами), что позволяет легко и точно установить правильность или ошибочность действий. Эти результаты поддаются количественной оценке в баллах в соответствии с определенной шкалой. Таким образом, квалиметрические качества тестов позволяют обеспечить объективность и унифицированность проверки, независимость оценки результатов от личных суждений проверяющего.

3. Четкая определенность форм и содержания задания и всей структуры теста делает тестовый контроль экономичным, т. е. позволяет проверить одновременно большую группу обучаемых и значительный объем материала у каждого испытуемого.

4. Тщательность подготовки теста в соответствии с определенными разработанными правилами и предварительной экспериментальной проверкой для совершенствования редакции теста.

5. Строгая регламентация процедуры тестирования.

Тест как контрольный документ или учебно-методическая разработка представляет собой совокупность, систему заданий, которая может делиться на субтесты для тестирования отдельных видов речевой деятельности (аудирования, говорения, чтения, письменной речи) или аспектов языка (фонетики, грамматики, лексики).

Существуют различные виды тестов, но единая система классификации тестов к настоящему времени педагогической наукой еще не разработана.

Наиболее полная классификация по целевым, функциональным и содержательным признакам, а также по формальным признакам представлена И. А. Рапопортом, Р. Сельг и И. Соттер. Они выделили следующие подгруппы тестов:

1. По цели применения:

-- констатирующие тесты;

-- диагностирующие тесты;

-- прогностические тесты.

2. По виду осуществляемого контроля:

-- тесты текущего контроля;

-- тесты рубежного контроля (получетверти, семестра);

-- тесты итогового контроля (конец учебного года);

-- тесты заключительного контроля (окончание курса обучения).

3. По статусу контролирующей программы:

-- стандартизированные тесты;

-- нестандартизированные тесты.

4. По объекту контроля:

-- тесты, измеряющие усвоение языкового материала (навыки);

-- тесты, измеряющие сформированность речевых умений.

5. По характеру контролируемой деятельности:

-- тесты лингвистической компетенции;

-- тесты коммуникативной компетенции.

6. По направленности тестовых заданий:

-- дискретные тесты;

-- глобальные тесты.

7. По соотнесению с нормами или критериями:

-- тесты, ориентированные на нормы;

-- тесты, ориентированные на критерии.

Классификация тестов по формальным (внешним) признакам включает:

1. По структуре и способу оформления ответа:

-- избирательные тесты;

-- тесты со свободно конструируемым ответом.

2. По характеру выборочных ответов:

-- альтернативные тесты;

-- тесты множественного выбора;

-- тесты перекрестного выбора.

3. По гомогенности заданий:

-- тесты на скорость, состоящие из равнотрудных заданий;

-- тесты на сложность, состоящие из все более усложняющихся к концу заданий.

В основе разделения тестов на машинные и безмашинные лежит следующий критерий -- способ презентации стимула и возможности оперативной обратной связи. В напечатанном виде, в магнитофонной записи или совмещением этих способов предъявляются безмашинные тесты. Их выполнение проверяется с помощью контрольных матриц, ключей, позволяющих максимально сократить время обработки результатов.

Сейчас все активнее применяются машинные, компьютерные тесты. Заложенная в них контролирующая программа позволяет сразу же после выполнения суммировать баллы за совокупность заданий, например за субтест.

Поскольку одной из задач данного исследования является разработка банка тестов в формате ЕГЭ, рассмотрим более подробно следующие виды тестовб выделенные исследователем Фоменко Т.М.

Стандартизированные тесты -- это официально зарегистрированные тесты, составленные коллективом специалистов и проверенные на большом числе испытуемых. В процессе подготовки и применения стандартизированных тестов предполагается статистическая обработка результатов тестирования. Например, при проведении Единого государственного экзамена используются стандартизированные тесты. Нестандартизированные тесты могут быть составлены одним преподавателем и применяться в зависимости от конкретных задач в течение учебного года.

Объектами контроля в тесте может быть лингвистическая компетенция, и в таком случае тест измеряет усвоение языкового материала и навыки владения им.

Коммуникативный тест измеряет уровень коммуникативно-речевых умений.

Дискретные тесты -- это одноаспектные тесты, измеряющие усвоение языкового материала или сформированность конкретного речевого умения.

Глобальные тесты -- смешанные многоаспектные, измеряющие уровень владения иностранным языком данными испытуемыми. Таковыми являются тесты итоговой аттестации при проведении ЕГЭ, ИГА.

Нормативно-ориентированные тесты -- это тесты, предназначенные для определения сравнительного уровня подготовки (обученности) учащихся между собой и для определения сравнительного места, рейтинга для каждого тестируемого. Такие тесты используются, например, при проведении вступительных экзаменов в вузы. Результаты их выполнения позволяют ранжировать абитуриентов по количеству полученных баллов для зачисления.

Критериально-ориентированные тесты предназначены для определения уровня обученности испытуемого относительно некоторого критерия. Такими критериями при проведении ЕГЭ служат требования образовательного стандарта по иностранным языкам к уровню подготовки выпускников. Число заданий в таких тестах значительно больше, чем в нормативно-ориентированных. При создании тестов, ориентированных на критерий, содержание обучения иностранному языку должно быть отражено максимально. Итоговый критериально-ориентированный тест -- это система тестовых заданий, упорядоченных в рамках определенной стратегии предъявления и обладающих такими характеристиками, которые обеспечивают валидную содержательную интерпретацию учебных достижений по отношению к установленным, статистически обоснованным критериям выполнения.

Целью данной работы является создание банка тестов в формате ЕГЭ, а данный формат включает в себя ряд характеристик. Тест в формате ЕГЭ является:

- стандартизированным, т.к. разрабатывается коллективом специалистов ФИПИ, официально зарегистрирован и проводится в масштабах всей страны;

- коммуникативным - измеряет уровень коммуникативно-речевых умений по всем видам речевой деятельности;

- глобальным, т.к. является многоаспектным и измеряет уровень владения иностранным языком испытуемыми;

- критериально-ориентированным, т.е. предназначен для определения уровня обученности испытуемого относительно критериев, в качестве которых выступают требования образовательного стандарта по иностранным языкам к уровню подготовки выпускников.

Учитывая данную характеристику, можно определить, что разрабатываемые в рамках данной работы тесты являются:

- нестандартизированными т.к. разрабатываются самостоятельно, без привлечения экспертов и включает небольшое число испытуемых;

- коммуникативными - направлены на тестирование коммуникативных умений письменной речи;

- критериально-ориентированными, т.к. их выполнение позволяет установить уровень освоения учащимися федерального государственного стандарта среднего (полного) общего образования.

Обобщая все вышесказанное, можно сделать вывод, что целью данного исследования является разработка нестандартизированных критериально-ориентированных тестов. В соответствии с форматом ЕГЭ данные тесты должны отвечать требованиям валидности, надежности, экономичности.

Валидность означает пригодность тестовых результатов для той цели, ради которой проводилось тестирование. Если тест позволяет проверить все то, что задумано авторами, он считается валидным относительно контролируемого содержания обучения. Валидность зависит от качества заданий, от степени полноты и глубины охвата содержания обучения в заданиях теста.

Надежность отражает степень постоянства, стабильности результатов тестирования. Надежным считается тест, который дает устойчивые результаты при повторном предъявлении при условии, что уровень подготовки испытуемых не изменился.

Экономичность теста -- возможность конкретного теста дать максимум достоверной информации о тестируемом при минимальных затратах времени и усилий на составление, проведение, проверку и обработку теста.

От формулировки тестового задания и его содержания во многом зависит успех/неуспех процедуры тестирования.

1. Тестовое задание - это составная единица теста, отвечающая требованиям к заданиям в тестовой форме и, кроме того, статистическим требованиям: 1) известной трудности; 2) дифференцирующей способности (достаточной вариации тестовых баллов); 3) положительной корреляции баллов задания с баллами по всему тесту, а также другим математико-статистическим требованиям (Аванесов В.С. Композиция тестовых заданий. Учебная книга для преподавателей вузов, учителей школ, аспирантов и студентов педвузов. 2 изд., испр. и доп. М.: 1998. -- С.217.).

В тестологии существуют различные подходы к классификации тестовых заданий. Тестологи подразделяют тестовые задания на несколько форм (или типов). В основу общепринятой классификации тестовых заданий положена форма.

Форма тестовых заданий - это способ организации, упорядочения и существования содержания теста. Соединившись с содержанием, форма придает заданию конкретный облик, или иначе, содержание принимает определенную форму. Таких форм четыре:

1-я форма -- задание с выбором правильного ответа (одного из множества или нескольких из множества).

2-я -- открытая форма, где тестируемый сам вписывает ответ в отведенное место.

3-я форма тестового задания -- задание на установление соответствия, где элементам одного множества требуется поставить в соответствие элементы другого множества.

В 4-ой форме требуется установить правильную последовательность хаотично представленных объектов.

Для классификации тестовых заданий исследователи (Банкевич Л.В., Коккота В.А. др.) предлагают исходить из следующих принципов [22,с.127]:

форма предъявления стимула -- наглядная (динамическое или статистическое изображение) или вербальная -- внеконтекстная или контекстная (микро- и макроконтекстная);

форма представления ответа -- наглядная, цифро - буквенная, вербальная - внеконтекстная или контекстная;

характер ответа по подсчету результатов -- объективный (по технике множественного выбора, ТМВ), полуобъективный (короткий однозначный ответ) или субъективный (со свободно конструируемым ответом, СКО);

модальность стимула и ответа (могут не совпадать) -- устная или письменная;

используемый в стимуле и в ответе язык (могут не совпадать) -- родной или изучаемый иностранный язык. [22; 87]

В ходе данного исследования разрабатываются тестовые задания открытой формы со свободно конструируемым ответом, которые предполагают самостоятельное конструирование ответа по заданной ситуации без опоры на предложенные варианты.

Задания со свободно конструируемым ответом используются для проверки коммуникативных умений письменной речи и говорения. В этих заданиях тестируемый конструирует свой ответ в соответствии с четко описанной тестовой ситуацией. Выполнение таких заданий требует от испытуемого демонстрации различных умений. Это положительная сторона заданий. Однако при этом возникают проблемы в измерении и оценивании. Из-за разнообразия привлекаемых умений объекты контроля укрупняются, становятся трудно измеримыми, в оценке появляются элементы субъективизма. Задания со свободно конструируемым ответом обычно оцениваются по специально разработанным критериям. Ответы учащихся дифференцируются по степени правильности решения коммуникативной задачи, по количеству ошибок, по оформлению и т. п. С другой стороны, в этих заданиях исключается вероятность угадывания. Тем самым повышается качество измерения.

Приведем в качестве примера тестовые задания в формате ЕГЭ. Для проверки умений письменной речи предлагаются задания с развернутым ответом (форма С). При контроле умений письменной речи эта форма заданий требует самостоятельной записи ответа в специальном бланке.

Задание для проверки умения написать личное письмо

Vous avez 20 minutes pour faire ce devoir.

Votre correspondant franзais a passй une semaine chez vous. Aprиs son retour

en France, il vous a йcrit une lettre, dont voici un extrait.

… Aprиs mon dйpart de Russie, je suis allй avec mes parents chez ma

grand-mиre. Elle habite dans une petite ville au bord de l'ocйan. Je me

suis beaucoup promenй, souvent а vйlo. Le repos йtait agrйable. Avec

mon pиre nous sommes allйs trois fois pкcher en pleine mer. C'йtait

formidable! Aimes-tu la mer? Aimes-tu les sports nautiques? Quel repos

prйfиres-tu, actif ou passif? …

Ecrivez une lettre а Marc, rйpondez а ses questions et posez - lui 3 questions

sur ses sports prйfйrйs.

(Еn 100 - 140 mots)

Respecter les rиgles de la correspondance.

В задании проверяются коммуникативные умения: сообщить информацию, запросить информацию, пригласить, а также умения соблюдать формат личного письма и использовать неофициальный стиль общения.

Тестовое задание состоит из инструкции, текста задания и правильного ответа или схемы оценивания. К форме тестовых заданий предъявляются некоторые общие требования:

1. Инструкция к тестовому заданию должна быть адекватна форме и содержанию заданий. Она содержит указания на то, что испытуемый должен сделать, каким образом он должен выполнять задание, где и какие пометки делать. Для однотипных заданий может использоваться одна инструкция, которая помещается в начале данной группы заданий. Например: Votre correspondant franзais a passй une semaine chez vous. Aprиs son retour

en France, il vous a йcrit une lettre, dont voici un extrait.

(Еn 100 - 140 mots)

2. Текст задания представляет собой содержательное наполнение задания. Он может содержать стимулирующий материал в виде рисунка, текста. Например, текстом задания для написания личного письма является отрывок письма французского друга.

… je suis allй avec mes parents chez ma

grand-mиre. Elle habite dans une petite ville au bord de l'ocйan. Je me

suis beaucoup promenй, souvent а vйlo. Le repos йtait agrйable…

Стимулом для написания письма служит вербальное описание ситуации общения. В задании сформулированы требования (логическая схема высказывания), которые служат опорой и определяют содержание письма. Стимулом для написания личного письма может быть также письмо друга по переписке, письмо французского школьника, опубликованное в газете или журнале.

3. Правильный ответ или схема оценивания -- обязательный компонент тестового задания. Для заданий на проверку умений письменной речи в качестве правильного ответа выступает схема оценивания, содержащая критерии оценивания письменного высказывания. Тестовое задание должно иметь однозначный правильный ответ. Это означает, что любой пользователь на основе сравнения ответа учащегося и правильного ответа или критериев оценивания может сделать однозначный вывод о том, выполнил данный ученик это задание верно или нет. Формулировка правильного ответа, схема оценивания должны быть ясными, недвусмысленными, чтобы при оценивании у проверяющего не могло возникнуть сомнения в правильности засчитываемого ответа. Только в этом случае можно обеспечить единство требований к тестируемым.

Для оценки коммуникативно-ориентированных заданий по письменной речи используются специально разработанные критерии, которые включают ряд качественных характеристик.

Особенностью оценивания заданий С1 является то, что при получении экзаменуемым 0 баллов по критерию «Содержание» все задание оценивается в 0 баллов.

Следующий вид тестовых заданий направлен на проверку умения составлять письменное высказывание с элементами рассуждения. Это задание высокого уровня сложности требует от учащегося умений выражать свое мнение по одной из проблем современной жизни в письменной форме, приводить аргументы, доказательства, примеры, делать выводы.

Задание - письменное высказывание с элементами рассуждения.

Vous avez 40 minutes pour faire ce devoir.

Plusieurs йcoles introduisent maintenant les uniformes, les йlиves doivent porter les tenues obligatoires, souvent choisies par les parents ou l'administration de l'йcole. Quel est votre avis?

Suivez le plan:

1. Introduction: posez le problиme.

2. Exposez votre opinion, argumentez-la.

3. Donnez les arguments "pour" un autre point de vue et expliquez pourquoi

vous ne les acceptez pas.

4. Conclusion.

Ecrivez une rйponse en 200 - 250 mots en argumentant votre point de vue.

1. Инструкция к тестовому заданию должна быть адекватна форме и содержанию заданий. Она содержит указания на то, что испытуемый должен сделать, каким образом он должен выполнять задание, где и какие пометки делать. Для однотипных заданий может использоваться одна инструкция, которая помещается в начале данной группы заданий. Например: L'annйe scolaire est terminйe. Ecrivez а votre ami(e) franзais(e) une lettre. Parlez-lui de vos rйsultats scolaires et de vos propositions de vacances. Posez-lui des questions sur ses vacances et invitez-le(la) а venir chez vous.

(En 100 - 140 mots).

Стимулом для написания письма служит вербальное описание ситуации общения. В задании сформулированы требования (логическая схема высказывания), которые служат опорой и определяют содержание письма. Стимулом для написания личного письма может быть также письмо друга по переписке, письмо французского школьника, опубликованное в газете или журнале.

3. Правильный ответ или схема оценивания -- обязательный компонент тестового задания. Для заданий на проверку умений письменной речи в качестве правильного ответа выступает схема оценивания, содержащая критерии оценивания письменного высказывания. Тестовое задание должно иметь однозначный правильный ответ. Это означает, что любой пользователь на основе сравнения ответа учащегося и правильного ответа или критериев оценивания может сделать однозначный вывод о том, выполнил данный ученик это задание верно или нет. Формулировка правильного ответа, схема оценивания должны быть ясными, недвусмысленными, чтобы при оценивании у проверяющего не могло возникнуть сомнения в правильности засчитываемого ответа. Только в этом случае можно обеспечить единство требований к тестируемым.

Для оценки коммуникативно-ориентированных заданий по письменной речи используются специально разработанные критерии, которые включают ряд качественных характеристик.

Уровень сформированности комплекса продуктивных речевых умений и навыков выпускников определяется экспертами, прошедшими специальную подготовку для проверки заданий ЕГЭ в соответствии с Методическими рекомендациями по оцениванию заданий с развернутым ответом, подготовленными ФИПИ, на основе Критериев и схем оценивания выполнения заданий разделов «Письмо» (задания С1-С2), а также дополнительных схем оценивания конкретных заданий.

Особенностью оценивания заданий С1-С2 является то, что при получении экзаменуемым 0 баллов по критерию «Содержание» все задание оценивается в 0 баллов.

При оценивании заданий раздела «Письмо» (С1-С2) следует учитывать такой параметр, как объем письменного текста, выраженный в количестве слов. Требуемый объем для личного письма С1 - 100-140 слов; для развернутого письменного высказывания С2 - 200-250 слов. Допустимое отклонение от заданного объема составляет 10%. Если в выполненном задании С1 менее 90 слов или в задании С2 менее 180 слов, то задание проверке не подлежит и оценивается в 0 баллов. При превышении объема более чем на 10%, т.е. если в выполненном задании С1 более 154 слов или в задании С2 более 275 слов, проверке подлежит только та часть работы, которая соответствует требуемому объему. Таким образом, при проверке задания С1 отсчитываются от начала работы 140 слов, задания С2 - 250 слов и оценивается только эта часть работы. За верное выполнение всех заданий экзаменационной работы можно максимально получить 80 первичных баллов. Баллы, которые фиксируются в свидетельстве о результатах ЕГЭ для поступления в ССУЗы и ВУЗы подсчитываются по 100-балльной шкале на основе анализа результатов выполнения всех заданий работы.

Для оценивания выполнения коммуникативных заданий раздела «Письмо» применяется сочетание двух рейтинговых шкал в системе, специально разработанной для измерения различных сторон коммуникативной компетенции учащихся. Система предусматривает словесное описание критериев оценивания развернутого ответа (личного письма - задание С1 и письменного высказывания с элементами рассуждения - задание С2) и цифровую характеристику нормативов оценки по каждому критерию. Каждый критерий в зависимости от его значимости оценивается рейтинговой шкалой различной длины: 3-0 или 2-0. Максимальное количество баллов, которое можно набрать за личное письмо, - 6, за написание сочинения-рассуждения -14.

К1 - содержание (3 балла max)

- соответствие поставленной коммуникативной задаче

- полнота раскрытия содержания

- выбор правильного стиля речи

- соблюдение норм вежливости

К2 - организация текста (3 балла max)

- логичность высказывания

- правильность использования средств логической связи

- соответствие оформления текста нормам, принятым в стране изучаемого языка

К3 - лексическое оформление речи (3 балла max)

- лексическая правильность речи (правильность словоупотребления, соблюдение лексической сочетаемости, использование узуальных словосочетаний)

- адекватность использования лексики в соответствии с заданной коммуникативной ситуацией

- разнообразие лексических средств

К4 - грамматическое оформление речи (3 балла max)

- грамматическая правильность речи

- адекватность использования грамматических структур в соответствии с заданной коммуникативной ситуацией

- разнообразие грамматических средств

- сложность грамматических конструкций

К5 - орфография и пунктуация (2 балла max)

- правильность орфографического и пунктуационного оформления текста

Личное письмо (С1) оценивается по двум критериям, а именно, «содержание» (максимальное количество - 3 балла) и «организация текста» (максимальное количество - 3 балла).

Особенности оценивания задания С1:

- При получении экзаменуемым 0 баллов по критерию «содержание» все задание оценивается в 0 баллов.

- Допустимое отклонение от заданного объема в задании С1 составляет 10%.

Нарушения в объеме в задании С1 (требуемый объем 100-140 слов):

- Если в задании С1 менее 90 слов, то задание проверке не подлежит и оценивается в 0 баллов.

- Если объем задания превышает допустимый в пределах 10%, то есть в письме не более 154 слов, то задание проверяется полностью без снижения баллов.

- При превышении объема более чем на 10%, т.е. если в задании С1 более 154 слов, проверке подлежит только та часть работы, которая соответствует требуемому объему, то есть с начала письма отсчитываются 140 слов, которые и подлежат проверке.

Письменное высказывание с элементами рассуждения (С2) оценивается по пяти критериям: «содержание» (максимальное количество - 3 балла) и «организация текста» (максимальное количество - 3 балла), лексика (максимальное количество - 3 балла), «грамматика» (максимальное количество - 3 балла), «орфография и пунктуация» (максимальное количество - 2 балла).

Особенности оценивания заданий С2:

- При получении экзаменуемым 0 баллов по критерию «содержание» все задание оценивается в 0 баллов.

- Допустимое отклонение от заданного объема в задании С2 составляет 10%.

Нарушения в объеме в задании С2 (требуемый объем 200-250 слов):

- Если в задании С2 менее 180 слов, то задание проверке не подлежит и оценивается в 0 баллов.

- Если объем задания превышает допустимый в пределах 10%, то есть в письме не более 275 слов, то задание проверяется полностью без снижения баллов.

- При превышении объема более чем на 10%, т.е. если в задании С2 более 275 слов, проверке подлежит только та часть работы, которая соответствует требуемому объему, то есть с начала письменного высказывания отсчитываются 250 слов, которые и подлежат проверке.

Требование к учащимся соблюдать заданный объем не является чисто формальным, оно прямо связано с содержанием письменного высказывания и в конечном итоге с выполнением коммуникативной задачи. Апробационные исследования, анализ выполненных учащимися работ показали, что при объеме личного письма менее 90 слов, письменного высказывания - менее 180 слов коммуникативная задача не может быть выполнена. Недостаточный объем письменной работы - это показатель низкого уровня владения языком, ограниченности лексического запаса и несформированности языковых навыков.

Превышение объема, с другой стороны, показывает неумение учащегося вдуматься в поставленную перед ним коммуникативную задачу, отобрать действительно важный для ее выполнения содержательный материал и четко сформулировать свои мысли. Часто превышение объема работы вызвано тем, что экзаменуемый старается вставить в свою работу выученные наизусть отрывки из пресловутых «топиков», что ведет к уходу от темы, а иногда - к ее полной подмене.

Следует обратить внимание, что допустимые границы объема выполнения заданий С1 и С2 очень широки даже в том виде, как они прописаны в КИМах: С1 от 100 до 140 слов, С2 от 200 до 250 слов. При подготовке учащихся к ЕГЭ их следует ориентировать именно на эти требования. Введение пункта о допустимости 10% отклонений от предписанного объема продиктовано заботой об учащихся и экзаменаторах, желанием избежать лишнего стресса, пониманием возможности ошибки при подсчете в стрессовой ситуации.

Итак, в данном параграфе рассмотрена такая форма итогового контроля как формат ЕГЭ, проводимый посредством тестирования, дана классификация типов тестов и определены характеристики разрабатываемых тестов.

В следующем параграфе освещается вопрос технологии разработки нестандартизированного критериально-ориентированного теста для контроля умений письменной речи.

1.5 Технология разработки нестандартизированного критериально-ориентированного теста для контроля письменной речи на базовом уровне обучения французскому языку как второму иностранному языку в средней (полной) общеобразовательной школе.

Разработка тестов - сложный и длительный процесс, который невозможен без знания технологии тестирования. Приступая к изучению такого понятия, как «технология тестирования», представленного в работе ее создателя, исследователя И.Ф. Сергеевой следует обратиться к рассмотрению таких понятий как «технология» вообще и «педагогическая технология».

Понятие «педагогическая технология» используется в современной дидактике и рассматривается некоторыми исследователями как 4 революция в образовании (после создания школ, использовании в обучении письменного слова и изобретения печати). Термин «педагогическая технология» трактуется как совокупность приемов работы учителя (способов его научной организации труда) с помощью которых обеспечивается достижение поставленных на уроке целей обучения с наибольшей эффективностью, за минимальный возможный для их достижения период времени [41; с. 10].

В последние годы все больше заявляет о себе новая область знания -педагогическая инноватика - сфера науки, изучающая процессы развития школы, связанные с созданием новой практики образования. Эти процессы называют инновационными [43; с.23 9]. К основным функциям инновационной деятельности учителя педагоги-исследователи относят прогрессивные (так называемые бездефектные) изменения педагогического процесса и его компонентов, одним из которых является педагогическая технология. Термин "педагогическая технология" используется для обозначения совокупности приемов работы учителя (способов его научной организации труда), с помощью которых обеспечивается достижение поставленных на уроке целей обучения с наибольшей эффективностью за минимально возможный для их достижения период времени. Технологический подход к учебному процессу гарантирует достижение поставленных целей обучения. Оперативная обратная связь которая пронизывает весь учебный процесс, является основой последовательной ориентации обучения на цели. Таким образом, отличительными особенностями технологического конструирования учебного процесса являются: