Управлять, и корректировать каким бы то ни было процессом возможно лишь на основании данных контроля над его течением, не составляет исключения и процесс учебной деятельности. Эффективность применения стандартов возможна только в условиях объективного контроля знаний и умений учащихся.

Различают два метода контроля - субъективный и объективный. Субъективный метод контроля означает выявление, измерение и оценку знаний, умений, навыков, исходящую из личных представлений экзаменатора. Этот метод оценки знаний пригоден для итогового контроля, так как не обладает необходимой точностью и воспроизводимостью результатов.

Под объективным контролем подразумевают контроль, который обладает необходимой точностью, воспроизводимостью результатов.

Инструментом, который позволяет объективно оценивать качество усвоения, является критериально-ориентировочный тест, сочетающий в себе контрольное задание и эталон, по которому можно судить по качеству усвоения.

Однако, как свидетельствует реальная практика, не всегда удается достичь достаточной степени объективности и оперативности контроля в обучении. В следствии этого часто снижается представление об учебной деятельности учащихся.

Тест тем принципиально отличается от привычного контроля знаний, что к нему (заданию) заранее приготовить эталон, с которым сравнивают ответ студента. Эталон необходим для точного определения степени усвоения студентом содержания обучения, которая характеризуется коэффициентом усвоения, подсчитываемым по формуле:

где е - число операций теста, выполненных студентом правильно, р - общее число операций в тесте.

На Западе, особенно в США, тесты используются достаточно давно, и что любопытно: мы движемся к тестовой проверке знаний, а там - в противоположном направлении.

Тесты - это задание, состоящее из ряда вопросов и нескольких вариантов ответа на них для выбора в каждом случае одного верного. С их помощью можно получить, например, информацию об уровне усвоения элементов знаний, о сформированности умений и навыков учащихся по применению знаний в различных ситуациях.

Достоинство:

Главное достоинство тестовой проверки в скорости, а традиционной проверки посредством дидактических материалов- в ее основательности.

Недостатки:

Если результаты своей работы учащийся представляет только номера ответа, тут учитель не видит характера хода решения - мыслительная деятельность учащегося и результат может быть только вероятностным. Гарантии наличия знаний у учащегося нет;

К недостаткам тестов также относят возможность угадывания. Если, например, тестовое задание содержит только два ответа, один из которых правильный, то половину ответов на такие тестовые задания можно угадать.

Для диагностики успешности обучения разрабатываются специальные методы, которые разными авторами называются тестами учебных достижений, тестами успешности, дидактическими тестами и даже тестами учителя (под последними могут также подразумеваться тесты, предназначенные для диагностики профессиональных качеств педагогов). Как утверждает А.Анастази, по численности этот тип тестов занимает первое место.

Тесты - это достаточно краткие, стандартизированные или не стандартизированные пробы, испытания, позволяющие за сравнительно короткие промежутки времени оценить преподавателями и студентами результативность познавательной деятельности студентов, т.е. оценить степень и качество достижения каждым студентом целей обучения (целей изучения).

Тесты достижений предназначены для того, чтобы оценить успешность овладения конкретными знаниями и даже отдельными разделами учебных дисциплин, и являются более объективным показателем обученности, чем оценка.

Тесты достижений отличаются от собственно психологических тестов (способностей, интеллекта). Их отличие от тестов способностей состоит, во-первых, в том, что с их помощью изучают успешность овладения конкретным, ограниченным определенными рамками, учебным материалом, например, разделом математики или курсом английского языка. На формирование способностей (например, пространственных) влияние обучения также сказывается, но оно не является единственным фактором, определяющим уровень их развития.

Во-вторых, различие между тестами определяются целями их применения. Тесты достижений применяются для оценки успешности овладения конкретными знаниями с целью определения эффективности программ, учебников и методов обучения, особенностей работы отдельных учителей, педагогических коллективов и т.д., т.е. с помощью этих тестов диагностируют прошлый опыт, результат усвоения тех или иных дисциплин или их разделов.

Вместе с тем нельзя отрицать, что тесты достижений также могут в определенной степени предсказывать темпы продвижения учащегося в той или иной дисциплине, поскольку имеющийся на момент тестирования высокий или невысокий уровень овладения знаниями не может не отразиться на дальнейшем процессе обучения.

Для того чтобы, правильно ответить на вопросы, входящие в тест достижений, необходимы знания конкретных фактов, дат и др. Старательный студент, обладающий хорошей памятью, без труда может найти правильные ответы в заданиях теста достижений.

Наряду с тестами достижений, предназначенными для оценки усвоения знаний по конкретным дисциплинам или их циклам, разрабатываются и более широко ориентированные тесты. Это, например, тесты на оценку отдельных навыков. Еще более широко ориентированными являются тесты для изучения умений, которые могут пригодиться при овладении рядом дисциплин, например, навыки работы с учебником, математическими таблицами, энциклопедиями и словарями.

Существуют также тесты, направленные на оценку влияния обучения на формирование логического мышления, способности рассуждать, строить выводы на основе анализа определенного круга данных и т.д. Эти тесты в наибольшей степени приближаются по своему содержанию к тестам интеллекта и высоко коррелируют с последними. Поскольку тесты достижений предназначены для оценки эффективности обучения по конкретным предметам, то обязательным участником формулирования отдельных заданий должен стать преподаватель.

Отдельные тесты достижений можно объединять в тестовые батареи, что позволяет получать профили показателей успешности обучения по разным дисциплинам. Обычно тестовые батареи предназначаются для разных образовательно-возрастных уровней и не всегда дают результаты, которые можно сопоставлять друг с другом для получения целостной картины успешности обучения от курса к курсу. Однако в последнее время созданы батареи, позволяющие получать и такие данные.

По форме проведения тесты могут быть индивидуальными и групповыми, устными и письменными, бланковыми, предметными, аппаратурными и компьютерными, вербальными и невербальными. При этом каждый тест имеет несколько составных частей: руководство по работе с тестом, тестовую тетрадь с заданиями и, если необходимо, стимульный материал или аппаратуру, лист ответов (для бланковых методик), шаблоны для обработки данных.

В руководстве приводятся данные о целях тестирования, выборке, для которой тест предназначен, результатах проверки на надежность, способах обработки и оценки результатов. Задания теста, сгруппированные в субтесты (группы заданий, объединенные одной инструкцией), помещены в специальной тестовой тетради (тестовые тетради могут быть использованы многократно, поскольку правильные ответы отмечаются на отдельных бланках). Если тестирование проводится с одним испытуемым, то такие тесты носят название индивидуальных, если с несколькими - групповых. Каждый тип тестов имеет свои достоинства и недостатки. Преимуществом групповых тестов является возможность охвата больших групп испытуемых одновременно (до нескольких сот человек), упрощение функций экспериментатора (чтение инструкций, точное соблюдение времени), более единообразные условия проведения, возможность обработки данных на ЭВМ и др.

Основным недостатком групповых тестов является снижение возможностей у экспериментатора добиться взаимопонимания с испытуемыми, заинтересовать их. Кроме того, при групповом тестировании затруднен контроль за функциональным состоянием испытуемых, таким, как тревожность, утомление и др. Иногда для того, чтобы понять причины низких результатов по тесту какого-либо студента, следует провести дополнительное индивидуальное собеседование. Индивидуальные тесты лишены этих недостатков.

Тестирование широко используется в учебных заведениях для тренировочного, промежуточного и итогового контроля знаний, а также для обучения и самоподготовки учащихся.

Как уже указывалось, результаты тестирования могут выступать и как оценка качества преподавания, а также как оценка самих испытательных материалов.

Не меньший интерес представляет изучение результатов тестирования для определения качества лекции или семинара. Например, пусть в потоке у лектора несколько групп, и во всех проведено тестирование по заданному разделу курса. В тесте имеется определенное количество теоретических вопросов и практических задач. Каждый вопрос соответствует какой-либо теме. По этой же теме в тесте прилагается практическая задача. Если студенты во всех группах плохо справились с каким-либо теоретическим заданием и практической задачей к этому вопросу, следовательно, на лекции и на семинарах не уделено достаточного внимания этой теме (хотя необходимо учитывать, что группы неравномерны по контингенту).

В настоящее время наиболее часто используются следующие варианты тестовых контрольных мероприятий :

"автоматический", когда обучаемый выполняет задание в непосредственном диалоге с ЭВМ, результаты сразу переносятся в блок обработки;

“полуавтоматический”, когда задания выполняются письменно, а ответы со специальных бланков вводятся в ЭВМ (решения не проверяются);

“автоматизированный”, когда задания выполняются письменно, решения проверяются преподавателем, а в ЭВМ вводятся результаты проверки.

Особенностью первых двух является отстраненность преподавателя от проверки результатов испытаний. В этом случае, казалось бы, их объективность повышается. Однако, при этом утрачивается значительная часть информации, которую можно было бы получить при анализе результатов тестирования с использованием человеческого фактора.

В “автоматическом” режиме такой потери можно избежать. Но при использовании такого метода на сегодняшний день возможно появление некоторых специфических проблем.

Отсутствие достаточного парка ЭВМ. Не все учебные заведения могут позволить себе оснастить классы дорогостоящим компьютерным оборудованием в достаточном количестве.

Отсутствие навыков пользователя ЭВМ у обучаемых. Иногда приходится работать со студентами, у которых по каким-то причинам нет достаточной компьютерной подготовки, или же они вообще никогда не общались с компьютером.

Сложность и дороговизна разработки программного обеспечения.

Существует проблема распознания ответов произвольной формы в открытых текстовых заданиях.

“Автоматический” вариант применяется на кафедре “ВТ и САПР” в СибАДИ при изучении таких дисциплин, как “Информатика” и “Теории вероятности и математической статистики”. По подробней об этом будет сказано дальше.

В “автоматизированном” варианте система тестирования включает в себя испытательный материал - в качестве инструмента измерений, преподавателя-проверяющего - в качестве независимого эксперта и компьютерную оболочку, выполняющую функции обработки результатов и учета ошибок измерения, выявления статистических закономерностей, сравнения результатов испытаний с прогнозируемыми, среднестатистическими, а также между собой.

Одним из наиболее актуальных направлений развития компьютерных технологий в образовании является разработка специализированных систем проверки знаний студентов. Их активное использование помогает поддерживать нужный образовательный уровень студентов, предоставляет преподавателю возможность уделять больше внимания индивидуальной работе со студентами.

В порядке эксперимента в Московском Государственном Университете Экономики, Статистики и Информатики по некоторым дисциплинам было введено сетевое тестирование в качестве итогового контроля знаний. Сетевое тестирование там дало хорошие результаты. Как форма контрольных мероприятий, она особенно удобна при наличии доступа в систему с личного компьютера. В сравнении с традиционным опросом или экзаменом сетевое тестирование экономит время, активизирует процесс изучения материала. Также к достоинствам можно отнести простоту входа-выхода в систему; удобный интерфейс; минимальность информации, необходимой для регистрации студента (Ф.И.О., группа, № зачетной книжки, пароль); возможность автоматической (ручной) проверки правильности данных студентами ответов преподавателем в любое время; сохранность данных в системе (в течении любого необходимого периода времени); индивидуальность тестирования (студент вводит свой пароль, без которого никто другой войти и выполнить тестирование за него не сможет).

Положительной стороной данного опыта является то, что студенты находятся в одинаковых условиях, исключаются жалобы на необъективность экзаменатора.

В настоящее время компьютерное тестирование успешно используется также в СибАДИ на кафедре “ВТ и САПР” при изучении курса “Информатика”. После определенного цикла лабораторных работ студенту предлагаются тесты по определенной теме данного курса. Тесты включают в себя вопросы по правильному написанию и оформлению пройденных программных операторов или конструкций. Так, например, в одной из предлагаемых задач теста необходимо указать правильное написание оператора ввода простой переменной. На экране представлено несколько вариантов ответов, среди которых может быть несколько правильных, а не только один.

Также тесты включают в себя небольшие фрагменты программ, просмотрев которые, студенты должны определить, что выполняет данный фрагмент, и вычислить значение, полученное в результате решения данной задачи. Для выполнения таких тестов студент должен знать не только конструкции программных операторов, но и уметь логически мыслить, а также анализировать ответы.

В разработанных тестах содержится по 10 вопросов. Для обработки тестов была написана контролирующая программа.

Во время контрольных мероприятий студент за компьютером отвечает на вопросы, высвечивающиеся на экране, и в конце тестирования получает оценку по пятибалльной шкале.

Раньше при старой системе проведения экзамена по курсу “Информатика” требовалось довольно много времени для опроса всех студентов. В настоящее время теоретической частью экзамена является тестирование. Для охвата всей темы в тесте предлагается 30-40 вопросов. По окончании проведения контроля оценку ставит сама машина.

На этой же кафедре (“ВТ и САПР”) метод компьютерного тестирования вот уже несколько лет применяется в курсе “Теории вероятности и математической статистики”. На практическом занятии после обсуждения определений, формул и типовых задач студенты начинают самостоятельную работу с тестами. Тестирование рассчитано на 40 минут. При такой организации работы преподаватель выступает в роли консультанта, имеет возможность обсудить практически с каждым наиболее трудные моменты и ошибки. За отведенное время студент успевает разобрать 10-15 задач вместо обычных 3-4.

Рассмотрим еще один пример использования тестирования для контроля успеваемости студентов на примере кафедры общей и неорганической химии ГАНГ им. Губкина. В данном случае без применения ЭВМ.

После проведения статистических исследований по изучению тестирования как метода педагогического контроля было выявлено, что в тесте должно быть 15-20 заданий. Они помогают определить, владеет ли студент основными понятиями, закономерностями, умеет ли правильно записать формулы, а также как полученные знания помогают ему при решении практических задач.

Задания предлагаются, как правило, с ответами в “закрытой форме”, когда нужно выбрать один из нескольких предложенных ответов или в “открытой форме”, когда нужно вставить пропущенное слово. В этом случае, когда ответ однозначен, он оценивается по двухбалльной системе - 1 или 0, если задание имеет несколько правильных ответов, возможны три оценки -0, 0.5 и 1. Введение в тест заданий с многовариантными ответами развивает у студента потребность в поиске разных путей решения задачи, что необходимо для достижения основной цели обучения в вузе - умения самостоятельно выбирать способ выполнения поставленной задачи.

Анализ полученных результатов показал, что в течение семестра у студентов, способных к обучению от теста к тесту увеличивается число полных ответов на задания с многовариантными ответами. Можно, конечно, вместо одного задания с многовариантным ответом дать несколько с альтернативным, но это значительно увеличит число заданий в тесте и позволит проверить только уровень знаний, но не будет способствовать использованию тестов для развития навыков.

По мнению исследователей такой методики раздел курса считается проработанным, если выполнено 70% заданий.

Необходимо заметить, что тесты, создаваемые с привлечением компьютерных технологий или же без них, должны быть максимально просты в использовании (особенно на ЭВМ), и не требовали специальной подготовки для работы на компьютере.

1.3 Типы компьютерных тестов