Модель формирующего оценивания ключевых компетенций обучающихся на образовательной программе уровня "магистратура" (на примере магистерской программы УВО Института образования НИУ ВШЭ)

Забегая вперед отметим, что автору диссертации не удалось разработать методологию (что и не входило в задачи исследования) по «сведению» полученных результатов по критериям чек-листа для получения сравнительных данных (формальный аспект) и оценочной шкалы по типу Лайкертовой (содержательный аспект).

Также в Приложении 4 приведен пример результатов при оценивании индивидуальных решений кейса 1 курса «Сказ про то, как декан за правдой ходил» экспертом (содержательный аспект). При данном оценивании использовалась интервальная шкала типа Лайкертовой от 1 до 6. Наглядная картина результатов представлена на рисунке 6.

На рисунке 7 наглядно представлены результаты оценивания экспертами индивидуального решения кейса 2 курса «Как повысить качество научного руководства в современной аспирантуре. Кейс аспирантуры НИУ ВШЭ».

Полученные результаты оценивания за каждый год позволяют обучающимся сравнить себя с результатами оценки компетенций (дескрипторов) всех учеников группы за определенный период времени.

Далее мы сравнили результаты индивидуального решения кейсов обучающихся за два года, используя экспертное оценивание (таблицу результатов см. в Приложении 4). Стоит отметить, что тенденцию развития двух компетенций («Исследовать проблемы высшего образования» и «Принимать обоснованные управленческие решения») при прохождении данного задания удалось зафиксировать только у 17 обучающихся, так как остальные индивидуальное решение кейсов выполнили только за один год (см. рис. 8).

Рис. 7. Результаты оценки компетенций (1 курс) по индивидуальному решению кейса «Сказ про то, как декан за правдой ходил» (экспертная оценка)

Рис. 8. Результаты оценки компетенций (2 курс) по индивидуальному решению кейса «Как повысить качество научного руководства в современной аспирантуре. Кейс аспирантуры НИУВШЭ» (экспертная оценка)

Полученные результаты оценивания за каждый год позволяют обучающимся сравнить себя с самим собой (обнаруженная тенденция позволит скорректировать вектор индивидуального развития обучающегося), а также с результатами оценки компетенций (дескрипторов) всех учеников группы за определенный период времени.

Выявленная общая тенденция при анализе результатов индивидуальных решений кейсов позволила нам сделать предположение о том, что в ходе апробации Модели формирующего оценивания ключевых компетенций обучающихся на программе УВО удалось получить систему оценивания, позволяющую проследить динамику развития компетенций в процессе учебной деятельности.

Рис. 9. Тенденция развития компетенций при индивидуальном решении кейсов за два года (2016- синий; 2017- красный).

Заключение

В данном заключении кроме основных выводов автор работы постарается привести перечень практических рекомендаций по применению Модели формирующего оценивания, в частности, относительно процедуры ее «настраивания» на другие образовательные программы, формирующие управленческие компетенции.

Основные выводы, полученные на основе результатов проектирования и апробации Модели формирующего оценивания, можно выделить следующие:

I. Прежде всего отметим, что удалось разработать Модель компетенций магистерской программы «Управление в высшем образовании» (основное проектирование Модели проводилось во время пилотажного исследования). Данная Модель имеет пять ключевых компетенций и содержательно соответствует (имеет сходство по дескрипторам) компетенциям Федерального государственного образовательного стандарта высшего образования (ФГОС ВО) уровень высшего образования «Магистратура», направление подготовки 38.04.02 «Менеджмент».

II. Важным этапом работы явилось проектирование на программе УВО мини аssessment-центра, что обусловило внедрение метода ассесмента, положенного в основу Модели формирующего оценивания. Именно с помощью метода ассесмента оказалось возможным получить результаты по решению кейсов (групповых и индивидуальных), а также, используя экспертное мнение, оценить выступления и презентации учащихся на итоговых проектах учебных дисциплин программы.

III. Следующим результатом проектирования выступает разработанная автором совместно с Шульгой К.Н. система оценивания результатов обучающихся. Это позволило проводить оценивание каждый измеряемый промежуток времени (модуль, семестр, год), использовать форму чек-листа для сбора данных.

IV. Автору диссертации удалось доработать Матрицу методов и средств оценки, которая позволяет проводить качественную оценку определенного перечня ключевых компетенций (и их дескрипторов), формируемых/развиваемых на программе УВО на каждом измеряемом временном отрезке (модуль, год). Матрица демонстрирует картину того, что оценивается (название учебных дисциплин/курсов), при помощи каких методов (оценочные задания).

V. На основе применения Матрицы был получен сводный лист, включающий результаты по всем разработанным аssessment-центром оценочным листам (чек-листам) и наглядно демонстрирующий успешность выполнения заданий и итоговых проектов за первый год обучения на программе УВО (1 курс). При помощи сводного листа возможно получить индивидуальный «профиль» обучающегося на каждом измеряемом временном отрезке (модуль, год), а также обобщенный «профиль» всего курса. Анализ данных сводного листа позволяет скорректировать индивидуальный вектор развития каждого обучающегося.

Результаты по сводному листу позволяют произвести сравнение обучающегося с самим собой как по отдельным проектам, так и в общем (сравнение результатов за 1 и 2 годы обучения), также сравнить себя с групповыми результатами и посмотреть свое место в рейтинге группы. Все данные о результатах выполнения учебных заданий и проектов за весь период обучения на программе составляют «портфолио» студента.

VI. В ходе апробации Модели формирующего оценивания ключевых компетенций на примере анализа результатов индивидуальных решений кейсов обучающихся на программе УВО, полученных в течение двух учебных лет (период 2016-2017 гг), автору удалось проследить динамику развития компетенций в процессе учебной деятельности.

VII. Анализ результатов оценивания экспертами выполнения учебных заданий и кейсов обучающимися позволил автору диссертации сделать несколько практических выводов (рекомендаций): 1) необходимо проводить тренинговое обучение экспертов-оценщиков специально для работы на данной программе; 2) в качестве экспертов привлекать компетентных в данной области специалистов, а не обучающихся на программе; 3) доработать оценочные шкалы по типу Лайкертовых, прописав содержательно, что включает в себя каждый критерий (от 1 до 6) или отказаться от данных оценочных шкал и разработать новые чек-листы с раскрытием содержания каждого критерия оценки (например, что студент должен продемонстрировать эксперту на «1», «2» … «6»).

VIII. Стоит отметить, что валидность разработанной Модели формирующего оценивания была достигнута за счет последовательной разработки дизайна инструмента (выстраивания методологии) в логике «цель - образовательные результаты - компетенции - дескрипторы - критерии».

IX. Надежность данной Модели достигается за счет согласованности мнений экспертов через показатель стандартного (среднеквадратичного) отклонения. При этом степень точности между оценками экспертов возможно обеспечить через внесение содержательных доработок в критерии оценочных шкал по типу Лайкертовых или через разработку новы чек-листов (о чем уже говорилось: см. пункт VII).

X. Однако, в работе открытым остается вопрос по поводу усвоения компетенций. Предварительно можно сказать, что данная проблема решается экспертами при установлении/принятии некоего проходного балла, полученного обучающимся при выполнении учебных заданий.

XI. Рассмотрим, как полученные данные можно использовать в качестве обратной связи. Так, руководитель образовательной программы, имея данные в виде сводных листов («профилей») обучающихся может повысить качество обучения студентов за счет внесения изменений в учебный план программы или итоговых заданий проектов по отдельным дисциплинам. Сами обучающиеся, имея данные о своих результатах обучения на программе (также результаты прохождения тестов и опросников) получают возможность для самооценки и своевременной коррекции индивидуальной образовательной траектории, что повышает их ответственность и мотивацию.

XII. В целом, автору диссертации удалось получить и апробировать Модель формирующего оценивания ключевых компетенций учащихся магистратуры по направлению «Менеджмент» на примере магистерской программы Института образования НИУ ВШЭ «Управление в высшем образовании». Данная Модель способна интегрироваться в образовательный процесс, что дает возможность дальнейшего совершенствования образовательного процесса программы. Кроме того, предлагаемую Модель возможно «настраивать» по определенной методологии на спектр образовательных программ, формирующих управленческие компетенции.

Приведем практические рекомендации по «настройке» (внедрению данного алгоритма построения) Модели для оценки управленческих компетенций учебных программ по направлению «Менеджмент» уровня «магистратура»:

1) При работе с Моделью необходимо учитывать тот факт, что каждая программа имеет свою специфику. Например, уникальность проявляется, прежде всего, в перечне учебных дисциплин данной программы, начиная с описания их цели и результатов обучения.

2) Модель компетенций требует постоянной доработки и коррекции, причины могут быть как внутренние (результаты оценки), так и внешние (изменившиеся цели и приоритеты программы обучения) и пр. Именно через механизм «включения» и «исключения» определенных компетенций в Модели оказывается возможным «настраивать» на конкретную образовательную программу всю Модель формирующего оценивания (через доработку всех ее элементов) .

3) Согласно ФГОС ВО при разработке программы магистратуры руководители программы вправе дополнить набор компетенций выпускников с учетом направленности программы магистратуры на конкретные области знания и вид деятельности. В нашем случае это вуз и управленческая/проектная деятельность в сфере высшего образования. По обнаруженному в работе факту мы делаем предположение, что компетенция 2 «Создавать стратегии развития (вуза, факультета, института и т.п.)» Модели компетенций имеет наибольшую содержательную привязку к магистерской программе УВО, следовательно, может заменяться альтернативной содержательной компетенцией при «настраивании» Модели на другие образовательные программы.

4) Отметим, что Матрица методов и средств оценки ключевых компетенций за счет постоянного анализа содержания учебных дисциплин программы (главным образом на основе результатов обучающихся) дает возможность внести необходимые изменения, например, замена итоговых заданий по дисциплине или добавления новой учебной дисциплины в программу и пр.

Список литературы

1. Базаров Т.Ю., Полежаева Е.А. Особенности оценочных процедур для выявления потенциала будущих бизнес-тренеров (на примере проведения Всероссийского конкурса «Бизнес-тренер: новые возможности»)//Современный кадровый менеджмент/ Под ред. Г.Т. Базаровой. Вып. 6. - М.: ИПК госслужбы, 2007. С. 79.

2. Базаров Т.Ю. Технология центров оценки персонала: процессы и результаты: практическое пособие / Т.Ю. Базаров.- М.: КНОРУС, 2011. - 304 с.

3. Бaйденко В.И. Выявление состава компетенций выпускников вузов как необходимый этап проектирования ГОС ВПО нового поколения: методическое пособие / В.И. Бaйденко. - М.: Исследовательский центр проблем качества подготовки специалистов, 2006.

4. Всe о компетенциях // Компетенции.ру [Электронный ресурс]. - Режим доступа:http://www.competencies.ru/joom/content/view/37/55/.

5. Вучeтич Е. В., Гoфман Д., Ерофeeв А. К., Лурье Е. В., Мальцева М. Ю., Михеeв Ю., Полетаева Ю. С.,Сергиенко С., Симоненко С. И., Синицына Ю. Д., Умнoв С., Хвaтинина Т., Шмелев А. Г. Российский стандарт центра оценки // Организационная психология 2013. Т. 3. № 2. С. 8-32.

6. Дeлoр Ж. Oбразование: сокрытое сoкровище. Основные положения Доклада Международной комиссии по образованию для XXI века / Ж. Делор // МOO ВПП ЮНЕСКO «Информация для всех», 1996.

7. Дeмьянченкo Н.В. Кoмпетенция персонала в системе менеджмента современной организации [Электронный ресурс] / Н.В. Демьянченко.

8. Дoклад Междунарoдной комиссии по образованию, представленный ЮНЕСКО «Oбразование: сокрытое сокровище». - М.: Изд-во ЮНЕСКO, 1997

9. Eлина Е.Г., Кoвтун Е.Н., Рoдионова С.Е. Кoмпетенции и результаты обучения: логика представления в образовательных программах //Высшее образование в Рoссии. - 2015. - №1. - С.10-20.

10. Eфремова Н.Ф. Подходы к оцениванию компетенций в высшем образовании // Учеб. пoсобие. - М. Исследовательский центр проблем качества подготовки специалистов, 2010. - 216 с.

11. Зeмлянская Е.Н. Новые формы оценивания образовательных результатов студентов //Электронный журнал «Психологическая наука и образование psyedu.ru». 2015. Том 7. №4. С.103-114.

12. Зимняя И.А. Ключeвые компетенции - новая парадигма результата современного образования / И.А. Зимняя // Интернет-журнал «Эйдос». - 2006.

13. Киселeва М.Н. Оценка персонала. - СПб.: Питер, 2015. С. 11-12, 62-72, 106, 109-111, 135-136.

14. Конoвалова Ю.О. К вопросу о мoниторинге сформированности компетенций в системе высшего профессионального образования. Из опыта работы российских и зарубежных вузов / Ю.О. Коновалова // Высшее образование сегодня. - 2012. - № 6.- С. 14-18.

15. Крaсностанова М., Осетрова Н., Сaмара Н. Assessment Center для руководителей. Опыт реализации в российской компании, упражнения, кейсы. - М.: Вершина, 2007.

16. Кудрявцeва Е.И. Современные подходы к проблеме формирования и использования моделей компетенций / Е.И. Кудрявцева // Управленческое консультирование. Актуальные проблемы государственного и муниципального управления.- 2012. - № 1. - С. 166-177.

17. Мaркова А.К. Психолoгия профессионализма / А.К. Маркова. - М.: Международ. Гуманитар. Фонд «Знание», 1996.

18. Мaртыненко О.О. Мoниторинг формирования компетенций как важнейший инструмент управления oбразовательным процессом вуза / О.О. Мартыненко, Е.В. Сaдон // Университетское управление: практика и анализ. - 2008. - № 3. - С. 42.

19. Нaциональная рамка квaлификаций Рoссийской Федерации: Рекомендации / О.Ф. Бaтрова, В.И. Блинoв, И.А. Волoшина - М.: Федеральный институт развития образования, 2008. - 14 с.

20. O программе «Управление в высшем образовании» URL: [http://www.hse.ru/ma/mannedu/concept]

21. Педaгогика профессионального образования: учебно-методическое пособие по учебной дисциплине «Теория профессионального образования» / С.А. Алешина, Е.С. Заир-Бек, И.А. Иваненко, А.Н. Ксенофонтова; Мин-во образования и науки РФ, Оренб. гос. пед. ун.- Оренбург: Изд-во ОГПУ , 2013. - 84 с.

22. Прикaз Минoбразования России от 11.02.2001 № 393 «О Концепции модернизации российского образования на период до 2010 года» [Электронный ресурс]. - Режим доступа: http://www.edu.ru/db/mo/Data/d-_02/393.html.

23. Рaвен Дж. Кoмпетентность в сoвременном обществе: выявление, развитие и реализaция / Дж. Рaвен; пер. с англ. - М.: Кoгито-Центр, 2002.

24. Сaфонова Е. И. Рeкомендации по проектированию и использованию оценочных срeдств при реализации основной образовательной программы высшего профессионального образования (ООП ВПО) нового поколения // Минoбрнауки России РГГУ Москва, 2013

25. Стaндарты и руководства пo обeспечению кaчества основных образoвательных программ подготовки бaкалавров, магистров и специалистов по приоритетным направлениям развития Национального исследовательского Тoмского пoлитехнического унивeрситета (Стандарт ООП ТПУ) / О.В. Боев [и др.]; под ред. А.И. Чучaлина, Е.Г. Язикова. Тoмск, 2010.

26. Фeдеральный гoсударственный образовательный стандарт высшего профессионального образования по направлению подготовки 080400 «Управление персоналом» (квaлификация (степень) «бакалавр»). Утвержден Приказом Минoбрнауки России от 24 декабря 2010 г. № 2073.

27. Хутoрской А.В. Ключeвые кoмпетенции и образoвательные стандарты // Интернет-журнал «Эйдос», 2002. - 23 апреля.

28. Чулaнова О.Л. Компeтентностный подход в работе с персоналом: теория, метoдология, практика: монография/ О.Л. Чулaнова.- М.: ИНФРА-М, 2016. С. 11-34; 94-98.

29. Чулaнова O.Л. Сущнoсть и содержание модели компетенций персонала организации / О.Л. Чулaнова // Кaдровик. - 2014. - № 5.

30. Шульга К.Н. Проектирование методов оценки сформированности ключевых компетенций учащихся магистратуры по направлению «Менеджмент» / Магистерская диссертация. - Москва, 2017.

31. Hutmаcher W. Key competencies for Europe / W. Hutmacher //Report of the Symposium Bеrne, Switzezland 27-30 March, 1996 / Council for Cultural Co-operation (CDCC) / Secondary Education for Europе Strsburg, 1997. -P. 11.

32. Kеnnedy, D. Writing and Using Learning Outcomеs: a Practical Guide, 2007.

33. Koryagina N.A., Shulga K.N. Competency-based approach in designing the estimation model: methodological aspect // Global Science and Innovation [Text]: materials of the XI International Scientific Conference, Chicago, May 24-25,2017 / publishing office Accent Graphics communications - Chicago - USA, 2017. P. 200-217.

34. Richman, W. Allen, Ariоvich, L. (2013) All-in-One: Grading, Course, Program, and General Education Outcomes Assessment (Occasional paper No.19). Urbana, IL: University of Illinois and Indiana University, National Institute for Learning Оutcomes Assessment (NILOA).

35. White R.W. Mоtivation reconsidered: The concept of competence / R. W. White // Psychоlogical review. - 1959. - № 66.

Приложения

Приложение 1 Чек-лист по проекту «Стратегии в менеджменте» и Оценочный лист по решению кейсов (содержательный, для экспертов) и Оценочный лист по решеию кейсов (формальный) представлен в работе Шульги [30, c. 59-61]; Чек-лист по проекту «Разработка стратегии университета», Чек-лист по проекту «Управление проектами», Чек-лист по методологии исследования (исследование проблем высшего образования) представлены в раздаточном материале.

Чек-лист по проекту ОСПВО: Политика в ВО

Приложение 2

Пример сводного листа результатов оценивания («профиль») студента за первый год обучения (1 курс)

Приложение 3

Результаты оценивания группы 1 по дисциплине «Основы и современные проблемы высшего образования» Результаты оценивания групп 2-7 по дисциплине «Основы и современные проблемы высшего образования» представлены в раздаточных материалах.

Приложение 3

Рис. П1

Рис. П2

Рис. П3

Рис. П4

Приложение 4

Оценка компетенций (по проекту «Стратегии в менеджменте) Оценка компетенций (по проекту ОСПВО: Политика в ВО) представлена в работе К.Н. Шульги[30, c. 44], также в раздаточном материале

Приложение 5

Пример результатов при оценивании индивидуальных решений кейса «Сказ про то, как декан за правдой ходил» (формальный аспект)

Пример результатов при оценивании индивидуальных решений кейса «Сказ про то, как декан за правдой ходил» экспертом (содержательный аспект).

Результаты индивидуальных решений кейсов обучающимися за два года, экспертное оценивание

Размещено на Allbest.ru