Выбор методик изучения не должен быть случайным - его необходимо делать в соответствии с установленными критериями и показателями. Работая с диагностическими методиками, необходимо придерживаться следующих правил:

1. Содержание диагностической методики должно предполагать ожидаемый результат

2. Диагностика должна быть достаточно информативной и создавать широкое поле исследовательской деятельности

3. Результаты диагностического исследования должны анализироваться компетентными людьми

4. Любые результаты исследования должны служить не во вред, а во благо

5. По результатам диагностического исследования должна проводиться систематическая коррекционная работа

6. Необходимость педагогической диагностики должна разъясняться учащимся и их родителям [4]

Информационные и телекоммуникационные технологии - это обобщающее понятие, описывающее различные методы, способы и алгоритмы сбора, хранения, обработки, представления и передачи информации

В основе средств информационных и телекоммуникационных технологий, используемых в сфере образования, находится персональный компьютер, оснащенный набором периферийных устройств. Возможности компьютера определяются установленным на нем программным обеспечением. В современных системах образования широкое распространение получили универсальные офисные прикладные программы и средства информационных и телекоммуникационных технологий: текстовые процессоры, электронные таблицы, программы подготовки презентаций, системы управления базами данных, органайзеры, графические пакеты и т.п.

Тенденцией современного этапа информатизации образования является всеобщее стремление к интеграции различных компьютерных средств обучения и средств ИКТ, таких как электронные справочники, энциклопедии, обучающие программы, средства автоматизированного контроля знаний обучаемых, компьютерные учебники и тренажеры [2].

Если говорить о реализации различных методов диагностики с помощью средств ИКТ, то полностью могут быть компьютеризированы тестирование и анкетирование. Эксперимент и наблюдение могут только частично перенесены в условия применения ИКТ, например, данные, полученные в ходе эксперимента или наблюдения заносятся и обрабатываются в Excel. Далее рассмотрим специфику и предъявляемые требования к компьютерным тестам, остановимся на компьютерной обработке данных диагностики.

Начало XXI в. отмечено тем, что управление тестированием все чаще передается компьютеру. Если в прошлые годы автоматизировались отдельные стадии исследования, например предъявление материала, обработка данных, интерпретация результатов, то на современном этапе все чаще можно встретить программы, которые берут на себя все обследование целиком вплоть до постановки диагноза, что сводит необходимость присутствия психолога к минимуму.

Тесты, как правило, применяются для целей контроля. В этом случае с их помощью определяют качество знаний обучаемых, закончивших изучение темы, одного или нескольких учебных курсов. Кроме этого, применение тестов возможно и непосредственно в ходе учебного процесса. В этом случае работа с тестовыми материалами реализуется в виде практической самостоятельной работы обучаемых и позволяет реализовать обучение по принципам "учеба по аналогии" и "учеба на собственных ошибках". И, наконец, тестовые материалы могут служить инструментарием, применяемым для достижения целей диагностики. В этом случае, в зависимости от результатов тестирования предпринимаются некоторые содержательные, методические или организационные мероприятия, способные положительно сказаться на качестве обучения.

Всеобщий интерес к подобному способу оценивания знаний предопределили его положительные стороны:

· высокая степень формализации и унификации процедуры тестирования,

· возможность одновременного проведения тестирования на нескольких компьютерах,

· быстрое получение результатов бывает крайне необходимо в таких областях, как, например, клиническое обследование или консультирование;

· эксперт освобождается от трудоемких рутинных операций и может сконцентрироваться на решении сугубо профессиональных задач;

· повышается точность регистрации результатов и исключаются ошибки обработки исходных данных, неизбежные при ручных методах расчета выходных показателей (например, раньше при ручной обработке MMPI (Миннесотский многоаспектный личностный опросник) допускалось до 20% ошибок);

· возможность организации дистанционного тестирования посредством локальной компьютерной сети, либо через глобальную информационную сеть Интернет.

· исключена субъективность;

· возможность избежать "списываний" ответов [14].

У компьютерного теста есть недостатки (особенности), которые нужно учитывать при его использовании. К таким особенностям можно отнести:

· возрастные ограничения

· трудности анализа и оценки нестандартных ответов, использования вопросов творческого характера (больше возможностей анализа имеет учитель)

· невозможность контроля "многовариантных" знаний (термины-синонимы, различные фактические данные в разных литературных источниках, несовпадение определения одного понятия у разных авторов, разные точки зрения, теории и гипотезы по одному и тому же вопросу)

· сознательное субъективное искажение результатов тестирования

· опасность "слепых" (автоматических) ошибок

· потеря индивидуального подхода

· отсутствие доверительной обстановки

· трудности работы с невербальным материалом, особая сложность перевода в компьютерную форму проективных тестов; латентность этапов обработки и интерпретации данных (качество этих процедур полностью зависит от разработчиков программ)

· сложность, трудоемкость и дороговизна разработки программ

У некоторых испытуемых при взаимодействии с компьютером могут возникать эффекты "психологического барьера" или "сверхдоверия". Поэтому данные о валидности, надежности и репрезентативности бланковых тестов не могут быть автоматически перенесены на их компьютерные аналоги, что ведет к необходимости новой стандартизации тестов.

Недостатки компьютерных тестов вызывают настороженное отношение к ним психологов. Мало используются такие тесты в клинической психологии, где цена ошибки слишком высока. Отечественный психолог Л.С. Выготский выделял три уровня психодиагностики:

1) симптоматический (выявление симптомов);

2) этиологический (выявление причин);

3) типологический (целостная, динамическая картина личности, на основе чего строится прогноз). Компьютерная психодиагностика на сегодняшний день находится на низшем уровне - уровне симптоматического диагноза, практически не давая материала для выявления причин и вынесения прогноза.

Тем не менее, по-видимому, компьютерные тесты имеют большое будущее. Многие из перечисленных недостатков компьютерной психодиагностики наверняка будут устранены благодаря дальнейшему развитию электронной техники и совершенствованию психодиагностических технологий. Залогом такого оптимизма является нарастающий интерес науки и практики к компьютерной диагностике, в арсенале которой уже сейчас имеется свыше 1000 компьютерных тестов.

Среди существующих компьютерных тестов можно выделить следующие их виды:

1) по структуре - аналоги бланковых тестов и собственно компьютерные тесты;

2) по количеству тестируемых - тесты индивидуального и группового тестирования;

3) по степени автоматизации тестирования - автоматизирующие один или несколько этапов обследования и автоматизирующие все обследование;

4) по задаче - диагностические и обучающие;

5) по адресату - профессиональные психологические, полупрофессиональные и непрофессиональные (развлекательные).

Пользователем профессиональных компьютерных тестов является психолог, поэтому они разрабатываются специализированными лабораториями или центрами компьютерной психодиагностики. Эти тесты имеют ряд специфических особенностей: а) наличие архива (базы данных); б) наличие пароля на вход в тест или базу данных для обеспечения конфиденциальности результатов; в) развернутая интерпретация результатов с использованием профессиональных терминов, коэффициентов, с построением графиков (профилей); г) наличие информации о разработчиках методики, сведений о валидности и надежности, справочных материалов о лежащих в основе методики теоретических положениях.

Полупрофессиональные компьютерные тесты ориентированы на специалистов смежных профессий, например на педагогов, менеджеров по персоналу. Такие тесты зачастую снабжены редуцированной интерпретацией без использования специальной лексики, просты в освоении и работе. Тесты подобного уровня могут быть предназначены и для неспециалиста, рядового пользователя персонального компьютера, интересующегося психологией. Наконец, существует также большое число непрофессиональных компьютерных тестов, направленных на популяризацию психологических идей или преследующих развлекательные цели [14].

Кроме этого для группировки тестов и адекватного использования компьютерных средств автоматизации тестирования существует уровневая классификация тестовых материалов.

Тесты I уровня предназначаются для проверки умений школьников выполнять деятельность с подсказкой. Это тесты на опознание (условия задания требует ответа "да" либо "нет"); тесты на различение (определение правильности каждого из нескольких вариантов предложенных ответов); тесты на классификацию (решение задачи на соответствие элементов двух множеств).

Тесты II уровня предназначаются для выявления умений школьников самостоятельно по памяти воспроизводить и применять ранее усвоенную деятельность в алгоритмической форме. К ним относятся: тесты на подстановку (в заданиях необходимо дополнить контролируемую пропущенную составляющую); конструктивные тесты (задания этих тестов требуют самостоятельного воспроизведения ответа (действия) по памяти); тесты - типовые задачи (задания можно решить путем буквального, не преобразованного использования усвоенных алгоритмов деятельности).

Тесты III уровня предназначаются для выявления готовности школьников к продуктивным действиям эвристического типа, это нетиповые задачи и ситуации (в задании известна цель, но неясна ситуация, в которой цель может быть достигнута, требуется самостоятельная предварительная трансформация усвоенных правил типового действия и применение их для решения в данной, ранее незнакомой ситуации).

Тесты IV уровня предназначены для выявления творческих умений школьников - их исследовательских возможностей по получению новой информации. Это тесты-проблемы (задачи, алгоритмы, решения которых неизвестны и не могут быть прямо получены путем преобразования ранее известных методик).

Кроме этого, в процессе информатизации могут учитываться также и группы тестовых материалов, сформированные по их назначению. В такие группы собираются:

· тесты интеллекта, используемые для анализа уровня развития познавательных процессов и функций мышления школьников;

· тесты способностей, предназначенные для оценки возможности в овладении школьниками различными видами деятельности;

· тесты достижений, с помощью которых оценивают развитие знаний, умений, навыков учеников по результатам обучения;

· тесты личности, служащие для оценки эмоционально-волевых качеств школьника.

При этом из всех видов тестов, используемых в общем среднем образовании, самыми многочисленными и распространенными являются тесты достижений. [3]

Тестовые задания, входящие в содержание средств ИКТ, должны отвечать системе специфических требований, в которую, в первую очередь, входят требования предметной чистоты содержания, определенности, валидности, однозначности, простоты, надежности, правильности формы, локальной независимости, технологичности и эффективности.

Различают содержательную и функциональную валидность. Содержательная валидность - это соответствие теста содержанию контролируемого учебного материала. Функциональная валидность - соответствие теста оцениваемому уровню деятельности.

Выполнение требования определенности (общедоступности) теста необходимо не только для понимания каждым учащимся того, что он должен выполнить, но и для исключения правильных ответов, отличающихся от эталона.

Требование простоты теста означает, что тест должен иметь одно задание одного уровня и не должен состоять из нескольких заданий разного уровня усвоения.

Однозначность определяется как одинаковость оценки качества выполнения теста разными экспертами.

Понятие надежности тестирования определяется как вероятность правильного измерения уровня усвоения. Требование надежности заключается в обеспечении устойчивости результатов многократного тестирования одного и того же школьника.

При конструировании контрольно-измерительных средств ИКТ необходимо учитывать ряд рекомендаций и требований, обусловленных положениями современной дидактики. При разработке подобных средств и технологий целесообразно предусмотреть:

· наличие специальных средств для мотивации школьников, поддержания их внимания и интереса;

· градуирование степеней трудности и сложности учебного материала, заданий и упражнений подсистем контроля и оценки;

· наличие средств формализации и необходимых процедур для облегчения процессов обобщения;

· наличие итоговых обобщающих схем, определяемых по результатам контроля и измерения знаний школьников;

· использование значков и других специальных символов, обеспечивающих четкое различение компонентов учебного материала, видов контрольных заданий и упражнений;

· сопровождение теоретических описаний практическими примерами, построение контрольно-измерительных материалов на основе конкретных примеров из практики;

· описание связи учебного материала и материала контрольно-измерительного характера с дополнительными дидактическими действиями по поддержке самостоятельной познавательной деятельности школьников (обзорными объяснениями нового материала, консультациями преподавателей, видеоконференциями, списками рассылки, форумами и т.п.).

· доступность и дружественность языкового стиля, его ориентацию на целевые группы обучаемых;

· простоту навигации по учебному материалу, вопросам и заданиям компоненты контроля и измерения уровня знаний;

· сохранение общепринятых обозначений и терминологии;

· справочный режим, содержащий определение всех используемых объектов и отношений;

· возможность отмены школьниками ошибочных действий в ходе самостоятельной работы как в ходе изучения содержательного материала, так и в процессе выполнения соответствующих контрольно-измерительных процедур.

Этапы составления теста:

· определение цели тестирования и уровня контроля;

· определение времени тестирования и числа заданий в тесте;

· отбор содержания теста (с точки зрения полноты теста и его значимости, необходимо 70% содержания и более);

· разработка спецификации теста (содержательные элементы ставятся в порядке убывания значимости;

· подбор тестовых заданий (открытые, закрытые) с заданными дидактическими характеристиками и формирование фасетов (задания с одинаковыми дидактическими характеристиками);

· определение шкалы оценки результатов;

· апробация и коррекция теста.

Содержательные элементы теста определяются следующим образом. Определяется тема дисциплины и разбивается на разделы. В каждом разделе определяется тема, а в теме те содержательные элементы, на проверку усвоения которых и будет направлен тест. Для каждого содержательного элемента определяется то количество тестовых заданий, которое необходимо для проверки усвоения этого элемента учеником. Потом устанавливается сложность и тип этих заданий.

Шкала оценки результатов может варьироваться учителем в зависимости от уровня контроля (входной, текущего, тематического, рубежного, итоговая аттестация), а также использоваться с целью создания положительной мотивации к обучению и реализации дифференцированного подхода.

Базы заданий в тестовых оболочках формируются таким образом, что существует возможность написания различных сценариев одного и того же теста, а также многократное использование одного и того же задания при составлении других тестов (обучающих, тестов, ориентированных на повторение учебного материала, тестов различного уровня контроля).

В своей собственной предметной области все учителя должны уметь самостоятельно составить и провести предметный тест. Т.к. это значительно облегчает задачу рутинного контроля за уровнем достижений и динамикой обучения внедрение современных компьютерных методов. Поэтому значительное внимание должно уделяться общей культуре составления и проведения тестов.

Обработка результатов диагностики занимает значительную часть времени. Одной из наиболее эффективных технологий, облегчающих этот трудоемкий процесс, является автоматизация обработки результатов диагностических исследований, которая проводится с использованием специальных компьютерных программ.

С этой задачей успешно справляется базовая офисная программа Microsoft Excel, позволяющая создавать автоматизированные системы обработки результатов диагностики. Разрабатываемые в Microsoft Excel приложения позволяют значительно сократить время на обработку и анализ результатов. Например, за один час можно сделать полную автоматическую обработку данных по тесту Филипса по целому классу (25 человек) с расчетом всех индивидуальных и групповых показателей, что при ручной обработке займет минимум четыре часа.

Кроме сокращения времени, создаваемые в Excel приложения для обработки результатов, обладают и дополнительным спектром преимуществ:

1) Они позволяют использовать при обработке огромные статистические возможности, заложенные в программе Excel.

2) Обработчики Excel позволяют представить полученные результаты в автоматизированном режиме. Возможно спроектировать обработчик таким образом, что он будет автоматически генерировать отчеты, схемы, индивидуальные и групповые профили и т.д.

3) Обработчики Excel легко совместимы с другими программами Microsoft, что позволяет без проблем переносить данные из одной программы в другую

Для того, чтобы создавать обработчики психологических тестов в Microsoft Excel, необходимо рассмотреть общую технологию действия автоматизированной системы обработки результатов.

1) В специально созданную таблицу-оболочку в Microsoft Excel психологом вводятся имена участников тестирования и их ответы на вопросы.

2) Ответы участников тестирования автоматически сравниваются с ключом к тесту.

3) В соответствие с особенностями обработки теста, баллы суммируются произвольным образом, а затем выводится итоговая сумма баллов субъекта по тесту в целом и его отдельным субтестам (параметрам).

4) Итоговые баллы автоматически сравниваются с нормативными показателями. На основании этого сравнения в автоматической режиме выдается информация об уровне выраженности той или иной характеристики у субъекта.

5) На основании итоговых результатов отдельных субъектов тестирования выводятся результаты по определенной выборке.

6) Индивидуальные результаты субъектов и обобщенные результаты по выборке представляются в текстовой (программа позволяет давать описание результатов, рекомендации по развитию или коррекции) или графической форме (диаграммы, графики, профили). Так же рассчитываются общегрупповые статистические показатели.

Также для компьютерной обработки данных часто используются программы SPSS и Statistica.

Пакет программ SPSS 13.0 (аббревиатура SPSS расшифровывается как Statistical Package for Social Science - Статистический пакет для социальных наук) является наиболее распространенным, мощным и удобным инструментом статистического анализа. SPSS позволяет вводить и редактировать данные, представлять их в виде наглядных отчетов (в программе реализованы возможности для построения диаграмм около 50 типов), содержит в себе более 100 процедур статистического анализа, а также мощную систему помощи и подсказок.

Компьютерные технологии позволяют значительно интенсифицировать обработку и анализ данных прикладных исследований и открывают широкие возможности их использования в различных отраслях науки.

Заключение