Модели оценки результатов обучения

Элементы типового алгоритма	Описание 7-ми шаговой методики оценивания результатов обучения по образовательной программе UTEP
1. Оценка ожиданий	Шаг 1. Уточнение миссии и целей программы
2. Определение РО по ОП	Шаг 2. Определение 4-6 результатов обучения по ОП
3. Картирование и выравнивание учебного плана	Шаг 3. Определение того, где в учебном плане результаты и цели обучения охватываются: анализ учебного плана и программы
4. Определение плана оценивания	Шаг 4. Определение методов и техник оценивания
5. Подбор методов оценивания
6. Сбор и анализ данных оценивания	Шаг 5. Сбор, создание таблиц, анализ данных и отчет по результатам
7. Совершенствование ОП	Шаг 6. Использование результатов оценивания Шаг 7. Определите, кто будет предпринимать действия по улучшению

Методика предусматривает практически для каждого шага подробное описание последовательности всех операций, анкеты и чек-листы для самопроверки.

В рамках методики на шаге 3 рекомендуется разработка карты учебного плана с указанием взаимосвязи курсов с РО по ОП и определением значимости каждого РО для каждого курса (неважные - НВ, довольно важные - ДВ, умеренно важные - УВ, очень важные - ОВ). При этом для каждого РО должен быть установлен индекс УВ или ОВ хотя бы за одним курсом или дисциплиной (табл.14).

Таблица 14. Образец карты учебного плана и результатов обучения по ОП

Курс/ дисциплина	РО1	РО2	РО3	РО4	РО5	РО6
Дисциплина 1	ДВ	УВ	ОВ	НВ	НВ	УВ
Дисциплина …	…	…	…	…	…	…
Дисциплина N	УВ	ОВ	УВ	УВ	НВ	УВ

На шаге 4 заполняется карта учебного плана с указанием курсов и инструментов оценивания (статья (С), экзамен (Э), портфолио (П), лабораторная работа (ЛР), стандартизированный тест (Т), презентация (Пр), стажировка (Ст) и т.п.) (табл.15).



Таблица 15. Образец карты учебного плана, результатов обучения по ОП и инструментов оценивания

Курс/ дисциплина	РО1	РО2	РО3	РО4	РО5	РО6
Дисциплина 1	С	Э
Дисциплина …	…	…	…	…	…	…
Дисциплина N			Т		Пр

В продолжение шага 4 рекомендуется подготовить таблицу «Интеграция результатов обучения и инструментов оценивания» (табл.16).

Таблица 16. Интеграция результатов обучения и инструментов оценивания

Курс/ дисциплина	Охватываемые результаты обучения	Оценивание результатов обучения	Релеватность, валидность, надежность, объективность	Учебные активности, ориентированные на результаты обучения
Дисциплина 1
Дисциплина …
Дисциплина N

На шаге 5 представлены рекомендации по сбору и анализу данных и созданию «административного резюме», в котором отражены сведения о собранных данных с указанием электронных ссылок для удобного доступа (табл.17).

Таблица 17. Образец административного резюме

Цели программы	Где, когда и как собраны данные; инструменты оценивания	Ожидания в отношении удовлетворительного исполнения	Результат анализа	Программа последующих действий



На высоком уровне развития системы оценивания результатов обучения образовательная программа имеет план оценивания на несколько лет, в котором определено, когда и как каждый результат обучения будет оценен, и какие улучшения, основанные на выводах, будут реализованы.

Рис. 4 - Модель оценивания результатов обучения по образовательной программе с применением 7-ми шаговой методики оценивания РО по ОП UTEP

Вывод по результатам анализа модели оценивания результатов обучения по образовательной программе с применением 7-ми шаговой методики UTEP (рис. 4):

1) Процесс оценивания РО по ОП «встроен» в процесс оценивания по всем элементам учебного плана. Ответственность за формирование и оценивание результатов обучения по образовательной программе несут преподаватели всех дисциплин, за которыми закреплены конкретные РО по ОП.

2) Достижения обучающихся в ходе освоения образовательной программы отражаются также и в портфолио.

3) Данные по результатам оценивания накапливаются в разных базах, и на этапе формирования сводного отчета формируется «административное резюме» с электронными ссылками на разные источники.

4) Непонятно, сколько всего формируется процессов оценивания РО по ОП. Судя по таблице «Интеграция результатов обучения и инструментов оценивания», их ровно столько, сколько дисциплин в учебном плане.

5) В методике предусмотрен раздел, в рамках которого обсуждается вопрос о значении и достаточности оценок. Но при этом непонятно, учитывается ли оценивание РО по ОП в системе выставления оценок.

2.2.3 4-х стадийный цикл оценивания результатов обучения по образовательной программе (HEQCO)

Следующий подход разработан Советом по качеству высшего образования Онтарио (Learning Outcomes…, 2015). Методика строится на основе таксономии SOLO Б. Биггса. В рамках данной методики предлагается непрерывный 4-х стадийный цикл оценивания результатов обучения по образовательной программе.

Таблица 18. Сопоставление 7-ми шаговой методики оценивания результатов обучения по образовательной программе UTEP с элементами типового алгоритма

Элементы типового алгоритма	Описание 7-ми шаговой методики оценивания результатов обучения по образовательной программе UTEP
1. Оценка ожиданий	Стадия 1. Идентификация ожиданий от результатов обучения по образовательной программе.
2. Определение РО по ОП
3. Картирование и выравнивание учебного плана	Стадия 2. Карта оценочных заданий по образовательной программе.
4. Определение плана оценивания
5. Подбор методов оценивания
6. Сбор и анализ данных оценивания	Стадия 3. Сбор и анализ результатов оценивания.
7. Совершенствование ОП	Стадия 4. Совершенствование программы.

На второй стадии разрабатывается карта учебного плана (табл.19). Картирование учебного плана обеспечивает эффективную стратегию для определения, выравнивания и интеграции результатов обучения с последовательностью и расположением курсов в учебном плане. Иными словами, на этом этапе важно определить, как и где обучение происходит в учебном плане и как оно оценивается. Разработчики подхода отмечают, что картирование является визуальным подходом к анализу программ и может осуществляться с использованием графиков, таблиц, диаграмм или других инструментов, которые позволяют провести обзор и анализ программы в целом. С этим процессом может справиться небольшая команда, которая собирает начальную информацию у преподавателей и вводит данные в карту учебного плана.

Таблица 19. Карта взаимосвязи результатов обучения в преподаванием, обучением и оцениванием

Результаты обучения по образовательной программе	Ожидания от уровня квалификации	Виды преподавательской деятельности и возможности обучения	Оценивание и доказательства
К завершению программы успешные студенты будут…	Устанавливаются для каждого результата обучения, с которым выровнены характеристики уровня квалификации или аккредитационные требования	Какие конкретные виды преподавательской деятельности и возможности обучения помогут студентам достигнуть каждого результата обучения по образовательной программе?	Какие данные по каждому результату обучения должны быть собраны по каждому студенту в качестве доказательства того, что студенты смогли достичь планируемых результатов обучения?
1. …	…	…	…
2. …	…	…	…

Разработчиками подхода предлагается и другой вариант карты учебного плана по курсам (табл.20). Эта версия карты отражает, какую лепту каждый курс вносит в достижение результатов обучения, а также в рамках каких курсов проводятся оценочные мероприятия.



Таблица 20. Карта взаимосвязи результатов обучения по образовательной программе и курсов

Результаты обучения по ОП	Курсы нижнего уровня	Курсы более высокого уровня	Оценочные мероприятия
	Курс 1	Курс 2	Курс 3	Курс 4	Курс 5	Курс 6
РО1	В		У	У		М О1	О1
РО2		В		У О2	М О3		О2, О3

Примечание: В - вводный уровень; У - усиленный уровень; М - уровень мастерства; О - оценивание.

В результате такого анализа учебного плана пробелы в оценивании результатов обучения становятся очевидными. Например, можно выявить, что некоторые результаты обучения редко или вообще не оцениваются.

Действительно, картирование обеспечивает отличную возможность для проверки оценочных заданий, включаемых в программу. Конкретные оценочные задания могут быть перепроектированы. Как рекомендуют разработчики подхода, оценочные задания должны быть спроектированы на основе таксономии SOLO и учитывать приращение знаний, умений и навыков от каждого курса. Также оценочные задания должны быть встроены в курсы и базироваться на принципах аутентичного оценивания, соответствующего дисциплине. Каждый курс должен быть проверен для уверенности в том, что оценивание является конгруэнтным и строится через определенные результаты обучения по образовательной программе.

Таким образом, карта оценочных заданий по образовательной программе направляет процессы оценивания результатов обучения по отдельным курсам и систематической генерации доказательств на уровне программы.

Стадия 3 предполагает формирование механизмов сбора и анализа результатов оценивания. Сбор и анализ данных должен быть непрерывным (проводиться каждый семестр или ежегодно). Этот процесс решает несколько важных задач: определяет степень достижения студентами установленных результатов обучения по образовательной программе; позволяет выделить области образовательной программы, которые необходимо совершенствовать; демонстрирует качество образовательной программы работодателям, партнерам и потенциальным студентам; документально подтверждает достижения и обучение студентов, что может пригодиться при прохождении оценке эффективности и аккредитации образовательной программы.

Рис.5 - Модель оценивания результатов обучения по образовательной программе с применением методики HEQCO

Выводы по результатам анализа модели (рис. 5), полученной с применением подхода HEQCO:

1) Модель включает несколько процессов оценивания РО по ОП - по количеству установленных результатов обучения. При этом дисциплины, за которыми закреплены результаты обучения, ранжируются (вводный, усиленный уровни и уровень мастерства).

2) Оценивание конкретного результата обучения по ОП проводится по дисциплинам, в рамках которых РО формируется на уровне мастерства. Но в некоторых случаях оценивание РО по ОП может проводиться два раза - на последнем усиленном уровне и уровне мастерства.

3) По каждому РО по ОП выстраивается четкая траектория процесса оценивания на уровне образовательной программы.

2.2.4 Подход All-in-One

Подход «All-in-One» разработан в Принс-Джордж Колледже и применяется с 2012 года (Richman, Ariovich, 2013). Данный подход позволяет комбинировать системы выставления оценок и оценивания результатов обучения по отдельным курсам.

Как отмечают авторы, данный подход позволяет преодолеть «дефрагментацию» в оценивании, возникающую вследствие того, что образовательные организации создают отдельные, сосуществующие практики оценивания, обращаясь к оцениванию дисциплин, курсов и программ как к изолированным частям, а не как к взаимосвязанным компонентам оценки знаний и навыков студентов [50, С.3]. Подход All-in-One позволяет посредством использования унифицированных оценочных рубрик формировать централизованную базу данных, что требует применения технологической платформы.

Таблица 21. Сопоставление шагов подхода All-in-One с типовым алгоритмом

Шаги типового алгоритма	Подход All-in-One
1. Оценка ожиданий	1. Установление результатов обучения по дисциплине (курсу), образовательной программе и для уровня образования
2. Определение РО по ОП
3. Картирование и выравнивание учебного плана	2. Выравнивание учебного плана и выстраивание взаимосвязей между курсами разных уровней
4. Определение плана оценивания	3. Создание оценочных рубрик по каждому элементу учебного плана
5. Подбор методов оценивания
6. Сбор и анализ данных оценивания	4. Сбор и анализ результатов оценивания
7. Совершенствование ОП	5. Непрерывное совершенствование образовательной программы на основе результатов оценивания



По аналогии с ранее рассмотренными подходами, методика также предполагает тщательный и непрерывный анализ учебного плана для поддержания связей между результатами обучения по дисциплинам (модулям) и программы в целом. Принципиально важным моментом является необходимость разработки оценочных рубрик для каждого элемента учебного плана.

На уровне курса создание взаимосвязей начинается с определения ключевых заданий, которые используются для демонстрации всех результатов обучения по курсу. Если охватить все результаты обучения в одном задании невозможно, студенты оцениваются по 2-3 заданиям (например, промежуточный или финальный проект по дисциплине).

Каждая оценочная рубрика (табл.22) разрабатывается с помощью шаблона в электронной оболочке. Используя эту таблицу, преподаватели определяют набор оценочных заданий и уровней их исполнения, ранжируя их по шкале от «отлично» до «неудовлетворительно». Таким образом, преподаватель определяет, что включается в рубрику и то, как оценивается работа студента, затем заполняет таблицу в формате WORD. Далее оценивающий персонал загружает рубрику в базу данных по оцениванию.

Таблица 22. Образец оценочной рубрики

	Отлично	Хорошо	Средне	Ниже среднего	Неудовлетворительно	Результаты обучения по курсу	Ключевые компетенции
Область	Баллы: 5	Баллы: 4	Баллы: 3	Баллы: 2	Баллы: 1
							Коммуни-кация
							Крити-ческое мышление



Чтобы решить сколько баллов задать, преподаватель вначале использует описание, даваемое в каждой ячейке (например, в ячейке «средне»). Описание в этой ячейке включает конкретные характеристики. Для максимизации гибкости выставления оценок, преподаватель может затем решить, в рамках «среднего», заслуживает ли студенческая работа 5, 4 или 3 баллов, основываясь на качестве презентации работы. Таким образом, преподаватель не попадает в ловушку 5-ти категориальной рубрики. Вместо этого преподаватели могут использовать рубрику для направления процесса выставления оценок, но, тем не менее, удерживая оценку в предложенном континууме.

Как только закончится семестр, рубрики начинают использоваться немного в другом ключе. Для целей оценивания интересно не количество баллов, которые получил каждый студент, а уровень которого они достигли (отлично, хорошо, средне и т.д.) по рубрике для каждой области. Фокус анализа направлен на выявление доли студентов, которые попали в каждый уровень достижений. В целом, студенты, которые попали в уровни «отлично», «хорошо» и «средне», считаются достигшими ожиданий для определенных навыков (например, письмо), в то время как студенты, попавшие в уровни «ниже среднего» и «неудовлетворительно», считаются отстающими от ожидаемых результатов для этого навыка.

Как отмечают разработчики подхода, все знания, навыки и ценности, к которым студенты стремятся на уровнях курса, программы или образования вообще, являются взаимосвязанными. На уровне отдельного студента обучение является холистическим процессом, в котором различные наборы навыков могут приобретаться одновременно в течение продолжительного периода времени. Более того, все артефакты, произведенные студентом, представляют многообразие навыков и знаний, работающих во взаимодействии.

Управление измерением этих способностей через отдельные процессы, по мнению разработчиков, не имеет смысла. Вместо того, чтобы заставлять работать в организации три системы измерения, All-in-One снижает нагрузку, действуя в существующем рабочем процессе. Преподаватель оценивает работу студента и вводит данные в электронную систему. Этих данных достаточно для сбора информации по обучению на курсах и программах по всей образовательной организации. В этом случае отпадает необходимость в других процессах, которые снова и снова переоценивают работу студентов сквозь призму то результатов обучения по программе, то общих результатов образования. Все необходимые данные производятся одним процессом.

Кроме того, подход All-in-One оставляет за преподавателями свободу определения критериев для оценивания навыков студента не только на уровне курса, но также и на уровне программы или общего образования. Например, преподаватель, который преподает психологию, хотел бы оценить такой навык любого образованного человека, как «письмо». В этом случае преподаватель психологии создает оценочную рубрику, отражающую его собственные представления о навыках написания текстов. Этот подход, по мнению авторов, привлекателен для преподавателя, потому что в этом случае он не вынужден руководствоваться расплывчатым, универсальным «золотым стандартом» письма, но вместо этого, он вовлекает себя в дискуссию об ожиданиях в отношении навыков написания текстов по конкретной дисциплине, и о проблемах, которые встречают студенты, когда движутся от одной среды применения данного навыка к другой.

Высокий уровень вовлечения преподавателей в All-in-One влечет за собой значительный объем работы, что требует адекватной институциональной поддержки (как минимум, трехуровневой).

Сбор данных осуществляется на трех уровнях: отдельной секции курса, курса в целом и по всей образовательной программе. Эти данные фокусируются на количестве и доле студентов, попавших в каждую из групп (отлично, хорошо, средне, ниже среднего, неудовлетворительно). При анализе данных по образовательной программе результаты представляются в разрезе конкретных навыков (ключевых компетенций), как например, навыки письма. Кроме того, данный анализ может служить в качестве обратной связи для студента и информировать его, например, о том, что навыки письма у него сформированы на уровне «отлично», а критическое мышление - «средне». Таким образом, студент может наблюдать свой прогресс при освоении образовательной программы и предпринимать меры по повышению качества своего обучения.

Рис.6 - Модель оценивания результатов обучения по образовательной программе с применением подхода All-in-One

Выводы по результатам анализа модели оценивания результатов обучения по ОП с применением подхода All-in-One:

1) Модель предусматривает один процесс оценивания РО по ОП, который «встроен» в процессы оценивания результатов обучения по отдельным элементам учебного плана с помощью унифицированных оценочных рубрик, что исключает дублирование процессов.

2) Оценивание РО по ОП идет в ходе всего срока освоения программы и предусматривает постоянное (после каждого цикла оценивания) информирование обучающихся и преподавателей о достижении результатов обучения по ОП.

3) Результаты оценивания РО по ОП «встроены» в систему выставления оценок.

4) Не совсем понятно, как учитывается прогресс обучающихся в достижении РО по ОП. Решение этой проблемы требует постоянного анализа оценочных рубрик для их выравнивания во избежание занижения или завышения критериев оценивания. Это сделать возможно, но трудоемко.

2.3 Обоснование критериев выбора модели оценивания результатов обучения по образовательной программе

Напомним, что все рассмотренные подходы основываются на типовом алгоритме оценивания результатов обучения по образовательной программе, выявленном в ходе обзора литературы и практических руководств. Но, как мы убедились в ходе анализа подходов, все они отличаются как по набору операций, так и по конечному результату.

Критерии выбора модели оценивания результатов обучения по образовательной программе предлагаем сформулировать с учетом следующих выводов, полученных по итогам обзора литературы и анализа подходов:

- при проектировании ОП на принципах конструктивного выравнивания, РО по ОП являются ключевым интегрирующим элементом, в направлении которого «выравниваются» процессы обучения и оценивания. В этом случае наблюдается переход от традиционной к модели оценивания на принципах конструктивного выравнивания (рис.7, части а) и б)). При этом очень важны унификация формы оценочного инструментария для сбора данных и предоставление свободы преподавателям в части определения содержания оценочных заданий и критериев оценивания;

- типовой алгоритм оценивания РО по ОП эффективен при применении на непрерывной цикловой основе, при этом возможность повышения качества процесса оценивания появляется с завершением каждого нового цикла оценивания. Таким образом, чем больше количество циклов оценивания в ходе реализации образовательной программы, тем больше возможностей и информации появится у разработчиков для совершенствования ОП, оценочного процесса и оценочных средств (рис.7, часть в)). С другой стороны, количество циклов оценивания должно учитывать наличие и доступность временных и иных ресурсов;

- результаты оценивания РО по ОП не должны подменять или сводиться к традиционным оценкам. Однако, процесс оценивания РО по ОП и оценочные средства должны быть так «встроены» в учебный процесс по элементам учебного плана, чтобы помогать студентам видеть пробелы и работать над своим развитием, преподавателям - видеть свой вклад в становление будущего специалиста, совершенствовать процесс обучения и оценочные средства, и принимать более точные решения при итоговом оценивании РО по своей дисциплине. Таким образом, появится возможность преодолеть «разрыв» между результатами оценивания РО по ОП и системой выставления оценок.

Рис.7 - Модели оценивания: а) традиционная; б) основанная на принципах конструктивного выравнивания; в) включающая несколько циклов оценивания.

С учетом данных выводов в качестве возможных критериев для выбора модели оценивания результатов обучения по образовательной программе предлагаем рассмотреть следующие:

- наличие унифицированной формы для сбора данных результатов оценивания;

- возможность проведения нескольких циклов оценивания в ходе освоения образовательной программы одновременно по всем РО по ОП;

- возможность «встраивания» процесса оценивания РО по ОП в процесс оценивания по всем элементам учебного плана.

Оценку каждой модели по каждому критерию по предлагаем провести по следующей шкале: 1 - плохо, 2 - недостаточно хорошо, 3 - хорошо, 4 - очень хорошо.



3. РЕЗУЛЬТАТЫ

3.1 Характеристики действующей модели оценивания результатов обучения по магистерской программе «Государственное и муниципальное управление социально-экономическим развитием сельских территорий Севера (ГМУСЭРСТС)»

Магистерская программа «Государственное и муниципальное управление социально-экономическим развитием сельских территорий Севера» (далее «ГМУСЭРСТС») реализуется в СВФУ с 2013 года. Миссией программы является подготовка специалистов в области государственного и муниципального управления, готовых к разработке и реализации управленческих решений для социально-экономического развития сельских территорий Севера на основе инновационного и предпринимательского подходов.

В соответствии с федеральным государственным образовательным стандартом высшего образования (далее - ФГОС ВО) по направлению подготовки 38.04.04 Государственное и муниципальное управление (уровень магистратуры) требования к результатам освоения программы магистратуры включают 26 компетенций, в т.ч. общекультурных (ОК) - 3, общепрофессиональных (ОПК) - 3, профессиональных (ПК) - 20. Образовательная программа направлена на формирование всех общекультурных, общепрофессиональных и профессиональных компетенций, установленных в ФГОС ВО. Дополнительные компетенции разработчиками не установлены. Планируемые результаты обучения по каждой дисциплине (модулю) и практике отражены в рабочих программах.

Необходимо отметить, что результаты обучения по образовательной программе в соответствии с распространенным за рубежом подходом, для данной магистерской программы не установлены. В России формулирование результатов обучения по образовательной программе является редкой практикой. В частности, автором настоящей работы (Афанасьева, 2015) был проведен анализ описаний и учебных планов российских магистерских программ со схожей направленностью, который подтвердил, что результаты обучения по ОП были установлены только для одной из 5 рассмотренных образовательных программ. Также был изучен опыт формулирования результатов обучения для магистерских программ Университета Арктики [1].

Согласно учебному плану ОП «ГМУСЭРСТС» выпускник готовится к пяти видам профессиональной деятельности (ВПД) (табл. 23).

Таблица 23. Виды профессиональной деятельности по ОП

Вид профессиональной деятельности (ВПД)	Статус ВПД в учебном плане образовательной программы	Индекс ВПД	Коды компетенций в соответствии с ФГОС ВО	Кол-во ПК в кластере ВПД
организационно-управленческая	Дополнительный*	ВПД.Д.1	ПК-1,2,3,4	4
административно-технологическая	Дополнительный	ВПД.Д.2	ПК-5,6,7,8,9,10	6
консультационная и информационно-аналитическая	Дополнительный	ВПД.Д.3	ПК-11,12,13	3
проектная	Дополнительный	ВПД.Д.4	ПК-14,15,16,17	4
научно-исследовательская и педагогическая	Основной*	ВПД.О.5	ПК-18,19,20	3

* Примечание: в соответствии с требованиями ФГОС ВО основным (основными) видом (видами) профессиональной деятельности для программы академической магистратуры является научно-исследовательский и (или) педагогический. Обозначение «дополнительный» используется для кодировки неосновных ВПД в учебно-методической документации образовательной программы.



В качестве основного вида профессиональной деятельности разработчиками была выбрана научно-исследовательская и педагогическая деятельность (ВПД.О.5), что определяет тип программы - программа академической магистратуры. В учебном плане предусмотрены 4 модуля: М.1. Методология; М.2. Иностранный язык; М.3. Профессиональный; М.4. Общеэкономический (приложение 1).

Для определения «интенсивности» формирования компетенций по семестрам проведен анализ учебного плана по закреплению компетенций за дисциплинами. Подобный анализ позволяет получить информацию о начале и завершении периодов формирования компетенций или ВПД, «интенсивности» формирования компетенций или ВПД по семестрам.

В результате анализа было выявлено количество случаев закрепления 20 профессиональных компетенций (ПК) в 1 семестре - 34 случая, во 2 семестре - 55, в 3 семестре - 61, в 4 семестре - 56. В сумме за 4 семестра 206 случаев. Каждая компетенция закреплена в среднем 10,3 раза. Так, например, ПК-1 формируется по 5 элементам учебного плана, а ПК-10 по 18 элементам. На рис.8 представлены «пики», отражающие интенсивность формирования видов профессиональной деятельности по семестрам. «Пики» были выявлены на основе количества случаев закрепления профессиональных компетенций по данному ВПД за элементами учебного плана в конкретном семестре.



Рис. 8 - Распределение интенсивности формирования ВПД по семестрам на основе оценки количества случаев закрепления компетенций за дисциплинами

Так, ВПД.Д.1, ВПД.Д.2, ВПД.Д.3 активно формируются в 3 семестре; ВПД.Д.4 - во 2 и 4 семестрах, ВПД.О.5 - в 1, 2 и 4 семестрах. Совмещение данных сведений с видами учебной деятельности по образовательной программе позволяет выявить семестры, к которым можно «привязать» наборы оценочных заданий междисциплинарного типа, ориентированных на те или иные виды деятельности.

Кроме того, данный анализ показал, что все профессиональные компетенции формируются в течение 4 семестров, т.е. это затрудняет задачу проведения окончательного оценивания уровня сформированности какой-либо компетенции до завершения периода обучения по ОП в целом.

В целях выявления самооценки обучающихся по уровню сформированности компетенций была проведена самофотография (анкета представлена в приложении 2), в рамках которой каждому обучающемуся было предложено оценить уровень сформированности каждой компетенции по шкале: высокий (3 балла), базовый (2 балла), минимальный (1 балл), не сформирована (0 баллов). В самофотографии приняли участие 32 из 41 студента (78%). Из них студенты 2 курса составили 10 чел., 1 курса - 22 чел. Далее были выведены средние значения по каждой компетенции по группам и курсам, для их свода были использованы диапазоны уровней сформированности компетенций: высокий - 2,6-3,0; базовый - 1,6-2,5; минимальный - 0,6-1,5; не сформирована - 0-0,5. Профили самофотографий уровня сформированности компетенций по группам 1 и 2 курса представлены на рис. 9, сводная таблица средних данных по группам - в приложении 3.

Рис.9 - Профили самофотографии уровня сформированности компетенций студентов 1-го (две группы) и 2-го (одна группа) курсов обучения.

Анализ профилей по группам и курсам обучения показал, что на первом месте как сформированная на достаточно высоком уровне оказалась компетенция ОК-3 «готовность к саморазвитию, самореализации, использованию творческого потенциала». По остальным компетенциям результаты варьируются. Необходимо обратить внимание на «низкие» значения профиля студентов 2-го курса, т.к. качество итогов промежуточных аттестаций в данной группе достаточно высокое. Конечно, нельзя сбрасывать со счетов самокритичный настрой респондентов, однако, для нас важен другой вывод - чем еще, кроме критического настроя, они руководствуются при самооценке уровня сформированности компетенций? Какими критериями? Судя по результатам самофотографии, обучающиеся не могут оценить своего прогресса за период обучения на данной программе.

Модель оценивания, действующая по образовательной программе «ГМУСЭРСТС», построена на основе метода декомпозиции (табл.24).

Таблица 24. Действующая схема установления взаимосвязей между элементами учебного плана и дескрипторами

Компетенции	Элементы учебного плана
	Д1	Д2	Д3	…	Практика	НИР
ОК-1
З1 (ОК-1)	+
З2 (ОК-1)		+
У1 (ОК-1)	+
У2 (ОК-1)		+
В-1 (ОК-1)					+	+
…
ПК-1
З1 (ПК-1)			+
З3 (ПК-1)			+
У1 (ПК-1)			+
В1 (ПК-1)					+
…

Визуально действующую модель оценивания результатов обучения можно представить следующим образом (рис.10).

Рис.10 - Действующая модель оценивания РО по ОП «ГМУСЭРСТС»

В действующей модели определение оценочных заданий и оценивание результатов обучения по дисциплинам проводится автономно в рамках промежуточной аттестации. Основные результаты обучения по ОП разработчиками образовательной программы не установлены, и потому по отдельным элементам учебного плана не контролируются. Уровень сформированности компетенций оценивается в рамках междисциплинарных элементов образовательной программы, таких как курсовые проекты, практики, НИР и ВКР. Таким образом, действующая модель является традиционной.

Следующим шагом рассмотрим, какие решения предлагает каждый из подходов к определению и оцениванию результатов обучения по образовательной программе.

3.2 Сравнительный анализ предлагаемых вариантов моделей оценивания результатов обучения по образовательной программе и выбор модели для магистерской программы «ГМУСЭРСТС»

Модель оценивания РО по ОП будет разрабатываться для магистерской программы «ГМУСЭРСТС», имеющей узкую направленность и срок освоения 2 года.

Напомним общие требования к модели: актуальность (учет особенностей учебного плана и срока освоения образовательной программы), результативность (переориентация содержания и логики процесса оценивания на достижение планируемых результатов обучения), достоверность (документирование процессов оценивания), экономичность (учет действующей системы учебно-методической документации ОП).

Краткие характеристики моделей представлены по следующим показателям: количество процессов оценивания; количество циклов оценивания; участие всех ППС в оценивании РО по ОП; охват РО по ОП на каждый цикл; форма для сбора данных по результатам оценивания; хранение результатов оценивания.



Таблица 25. Сводная таблица характеристик предлагаемых моделей оценивания результатов обучения по образовательной программе

Варианты моделей оценивания РО по ОП	Краткие характеристики моделей
Модель №1 (подход ТПУ)	Количество процессов оценивания: 2 Количество циклов оценивания: 1 полный цикл - 1 раз в 2 года; короткие циклы возможны по семестрам и курсам Участие всех ППС в оценивании РО по ОП: нет Охват РО по ОП на каждый цикл: по плану оценивания Форма для сбора данных по результатам оценивания: ? Порядок сбора данных по результатам оценивания: после промежуточной аттестации Хранение результатов оценивания: ?
Модель №2 (подход UTEP)	Количество процессов оценивания: по количеству дисциплин Количество циклов оценивания: 4 (по семестрам) Участие всех ППС в оценивании РО по ОП: да Охват РО по ОП на каждый цикл: по плану оценивания Форма для сбора данных по результатам оценивания: ? Порядок сбора данных: 1 раз (по окончании семестровой промежуточной аттестации) Хранение результатов оценивания: портфолио
Модель №3 (подход HEQCO)	Количество процессов оценивания: по количеству РО по ОП Количество циклов оценивания: каждый РО по ОП оценивается хотя бы 1 раз за весь период обучения Охват РО по ОП на каждый цикл: по плану оценивания Форма для сбора данных по результатам оценивания: ? Участие всех ППС в оценивании РО по ОП: нет Порядок сбора данных: по окончании оценивания конкретного РО по ОП Хранение результатов оценивания: электронное портфолио и/или база данных
Модель №4 (подход All-in-One)	Количество процессов оценивания: 1 Количество циклов оценивания: 4 (по количеству семестров) Охват РО по ОП на каждый цикл: 100% Участие всех ППС в оценивании РО по ОП: да Форма для сбора данных по результатам оценивания: 1 (оценочные рубрики) Порядок сбора данных: 1 раз по окончании семестровой промежуточной аттестации Хранение результатов оценивания: портфолио и/или база данных

По данным табл. 25 видно, что самые существенные различия возникают по 4 показателям: количество циклов оценивания; участие всех ППС в оценивании РО по ОП; охват РО по ОП на каждый цикл; форма для сбора данных по результатам оценивания.

Сводные результаты оценки моделей представлены в табл.26.

Таблица 26. Результаты оценки моделей в соответствии с установленными критериями

№	Критерии	Оценки
		ТПУ	UTEP	HEQCO	All-in-One
	Наличие унифицированной формы для сбора данных результатов оценивания.	1	2	2	4
	Возможность проведения нескольких циклов оценивания в ходе освоения ОП одновременно по всем РО по ОП.	2	2	2	4
	Возможность «встраивания» процесса оценивания РО по ОП в процесс оценивания по всем элементам учебного плана.	1	2	2	4
		4	6	6	12

Примечание: 1 - плохо, 2 - недостаточно хорошо, 3 - хорошо, 4 - очень хорошо.

Сравнительный анализ предлагаемых моделей оценивания результатов обучения по образовательной программе для магистерской программы «ГМУСЭРСТС» показал, что установленным критериям более всего соответствует модель, разработанная с применением подхода All-in-One, которая набрала по итогам оценивания 12 баллов из 12 возможных.

Действительно, данная модель отвечает всем требованиям к современным моделям оценивания результатов обучения по образовательной программе, таким как: возможность проведения цикла оценивания каждый семестр; унифицированная форма для сбора данных оценивания по всем элементам учебного плана; включенность всех элементов учебного плана в процесс формирования и оценивания результатов обучения по образовательной программе; высокая вовлеченность преподавателей, задействованных в реализации образовательной программы, при сохранении их свободы в части определения оценочных заданий и критериев оценивания; широкие возможности для обратной связи со студентами в ходе реализации образовательной программы. Но вместе с тем, высок и риск неудачи, если не удастся убедить и вовлечь всех участников в процесс оценивания результатов обучения по образовательной программе.

3.3 Проект модели оценивания результатов обучения по образовательной программе «ГМУСЭРСТС», разработанный с применением адаптированного подхода All-in-One

С учетом результатов предпроектного исследования определим алгоритм разработки модели оценивания результатов обучения по образовательной программе на основе подхода All-in-One. Подход требует адаптации некоторых элементов и разработки дополнительных инструментов для обеспечения соответствия ФГОС ВО и учета особенностей действующей модели оценивания по образовательной программе.

Алгоритм разработки модели оценивания результатов обучения по образовательной программе на основе подхода All-in-One включает:

1) Формулирование результатов обучения по образовательной программе (перечень и кодификация).

2) Установление взаимосвязи результатов обучения по образовательной программе с набором компетенций ФГОС ВО (матрица 1 в формате MS EXCEL).

3) Установление взаимосвязи результатов обучения по образовательной программе с набором дисциплин учебного плана (матрица 2 в формате MS EXCEL).

4) Разработка карты оценочных заданий по образовательной программе.

5) Разработка оценочных рубрик по каждой дисциплине на основе матриц 1 и 2 (оценочные рубрики в формате MS EXCEL).

6) Описание схемы и инструментов сбора и анализа данных результатов оценивания.

7) Описание схемы взаимодействия по совершенствованию образовательной программы и процесса оценивания.

Схематическое описание алгоритма представлено на рис.11.

Рис.11. - Схема алгоритма разработки модели оценивания результатов обучения по образовательной программе



Этап 1. Формулирование результатов обучения по образовательной программе (перечень и кодификация)

При формулировании результатов обучения по образовательной программе использованы рекомендации ряда авторов и практических руководств университетов, описания программ по государственному управлению разных университетов и программы по местному и региональному развитию Университета Арктики. Планируемые результаты обучения по образовательной программе «ГМУСЭРСТС»:

1. Применять критическое мышление и соответствующие технологии для анализа ситуации, описания и решения социально-экономической проблемы (РО1).

2. Готовить планы, проекты и стратегии по управлению сельскими территориями Севера на основе инновационного и предпринимательского подходов (РО2).

3. Проводить оценку потребностей местных сообществ на основе аналитических исследований в целях разработки управленческих решений по развитию территорий (РО3).

4. Представить результаты своего исследования в виде аналитического отчёта (статьи) с использованием технологии публичной защиты (РО4).

5. Готовить официальные письма и документы в соответствующем стиле (РО5).

6. Применять технологии лидерства и работы в команде в управленческой практике (РО6).

7. Выстраивать эффективные коммуникации в коллективе и в работе с населением на принципах толерантности и деловой этики (РО7).

Этап 2. Установление взаимосвязи результатов обучения по образовательной программе с набором компетенций ФГОС ВО

Установление взаимосвязей компетенций ФГОС ВО и планируемых результатов обучения по программе необходимо для представления доказательств о том, что все компетенции, установленные ФГОС, охвачены ключевыми результатами обучения по образовательной программе. При выполнении этой операции можно еще раз проверить корректность формулировок результатов обучения, проанализировать корректность установленных взаимосвязей между компетенциями, видами профессиональной деятельности и результатами обучения. Матрицу 1 (табл. 27) рекомендуется разработать в формате MS EXCEL для удобства проведения группировок данных в соответствии с потребностями.

Данная матрица может быть полезна преподавателям при разработке оценочных рубрик и определении содержания оценочных заданий по дисциплине. В уже применяемых при проектировании образовательной программы и учебного плана инструментах предусмотрено установление взаимосвязей компетенций и дисциплин. Создание данной матрицы необходимо рассматривать как вспомогательный инструмент, создающий «надстройку» нового уровня, которая позволит уже существующие комбинации компетенций переместить в контекст особенностей и направленности конкретной образовательной программы, и заставит все элементы учебного плана «заработать» не только на формирование компетенций, но и на их применение в определенном контексте.

Таблица 27. Матрица соответствия компетенций ФГОС ВО и результатов обучения по образовательной программе ГМУСЭРСТС

Группы компетенций ОК, ОПК и по ВПД	Компетенции	РО1	РО2	РО3	РО4	РО5	РО6	РО7
Общекультурные компетенции (ОК)	ОК-1	+	+	+	+
	ОК-2	+		+			+	+
	ОК-3	+			+		+	+
Общепрофессиональные компетенции (ОПК)	ОПК-1	+	+	+	+		+
	ОПК-2	+	+	+	+	+	+	+
	ОПК-3						+	+
Организационно-управленческая деятельность	ПК-1						+
	ПК-2						+	+
	ПК-3	+	+				+
	ПК-4	+	+
Административно-технологическая деятельность	ПК-5	+	+	+		+
	ПК-6	+	+			+
	ПК-7		+	+		+
	ПК-8	+				+
	ПК-9		+			+
	ПК-10	+	+	+		+
Консультационная и информационно-аналитическая деятельность	ПК-11	+	+	+	+
	ПК-12	+	+	+	+			+
	ПК-13	+	+	+	+	+	+	+
Проектная деятельность	ПК-14	+	+	+	+
	ПК-15	+	+	+	+		+
	ПК-16	+	+	+	+		+
	ПК-17	+	+	+	+
Научно-исследовательская и педагогическая деятельность	ПК-18	+	+	+	+
	ПК-19	+	+	+	+
	ПК-20						+	+

Этап 3. Установление взаимосвязи результатов обучения по образовательной программе с набором дисциплин учебного плана (матрица 2 в формате MS EXCEL).

Следующим важным шагом является установление взаимосвязи результатов обучения по образовательной программе с набором дисциплин учебного плана (табл.28).

Данная матрица дополнена столбцами «Форма контроля» и «Семестр», что позволяет также проводить необходимую группировку данных с помощью инструментов EXCEL по семестрам и формам контроля.

Таблица 28. Матрица взаимосвязей элементов учебного плана и результатов обучения по образовательной программе

Наименование дисциплин (модулей)	Форма контроля	Семестр	РО1	РО2	РО3	РО4	РО5	РО6	РО7
Модуль 1. Методология
Философия и методология науки	Экзамен	1	+			+
Теория и механизмы современного гос.управления	Экзамен	1	+	+	+	+	+
Педагогика и психология высшей школы	Зачет	1				+		+	+
Модуль 2. Иностранный язык
Иностранный язык в профессиональной сфере	Зачет	1		+		+	+		+
Иностранный язык в научной сфере	Экзамен	2		+		+	+		+
Модуль 4. Профессиональный
Муниципальное управление и местное самоуправление	Экзамен	1	+	+	+		+
Правовое обеспечение ГМУ	Зачет	2	+	+	+		+
Кадровая политика и кадровый аудит в организации	Зачет с оценкой	2					+	+	+
Лидерство и команда в организации	Зачет	3						+	+
Современные технологии управления СЭР	Экзамен	3	+	+	+		+
Технологии разработки и принятия УР	Экзамен	3	+	+	+		+
Экономика общественного сектора	Экзамен	2	+	+	+
Информационно-аналитические технологии ГМУ	Зачет с оценкой	2	+	+	+		+
Методология прикладных исследований в сфере публичного управления	Экзамен	2	+	+	+	+
Профессиональная этика	Зачет	2	+	+	+	+	+	+	+
Управление в социальной сфере	Экзамен	4	+	+	+
Модуль 5. Общеэкономический
Микро и макроэкономика	Зачет	1	+	+	+
Экономика в менеджменте	Зачет	4	+	+	+
Набор дисциплин по выбору
Электив 1 модуля Профессиональный
Управление развитием городов	Зачет	2	+	+	+				+
Управление местными ресурсами	Зачет	2	+	+	+				+
Социальное партнерство	Зачет	2	+	+	+				+
Электив 2 модуля Профессиональный
Предпринимательство в сельской местности	Зачет	4	+	+	+
Наименование дисциплин (модулей)	Форма контроля	Семестр	РО1	РО2	РО3	РО4	РО5	РО6	РО7
Маркетинг сельских территорий Севера	Зачет	4	+	+	+
Управление закупками	Зачет	4	+				+		+
Электив 3 модуля Профессиональный
Управление проектами	Зачет	3	+	+	+	+	+	+	+
Управление изменениями	Зачет	3	+	+	+	+	+	+	+
Управленческий консалтинг	Зачет	3	+	+	+	+	+	+	+
Электив 4 модуля Профессиональный
Экономическая безопасность на северных территориях России	Зачет	3	+	+	+	+
Качество жизни на Севере	Зачет	3	+	+	+	+
Защита прав коренных малочисленных народов Севера	Зачет	3	+	+	+	+	+		+
Электив модуля 5 Общеэкономический
Управление государственной и муниципальной собственностью	Зачет	3	+	+	+
Государственные и муниципальные финансы	Зачет	3	+	+	+
Управление человеческими ресурсами	Зачет	3	+	+	+		+	+	+
Практики, в том числе НИР
Учебная практика	Зачет с оценкой	1	+		+		+	+	+
Научно-исследовательская работа (НИС)	Зачет с оценкой	1	+	+	+	+	+	+	+
Научно-исследовательская работа (НИС)	Зачет с оценкой	2	+	+	+	+	+	+	+
Педагогическая практика	Зачет с оценкой	2					+	+	+
Технологическая практика	Зачет с оценкой	3	+	+	+	+	+	+	+
Преддипломная практика	Зачет с оценкой	4	+	+	+	+	+	+	+
Государственная итоговая аттестация
Выпускная квалификационная работа	Экзамен	4	+	+	+	+	+	+	+

Полученная информация может быть полезна при определении количества и содержания оценочных заданий по семестрам с учетом изучаемых в этот период дисциплин, а также при принятии решения о разработке полидисциплинарного оценочного задания, в которое каждая из дисциплин внесет свой вклад. При этом, с одной стороны, количество заданий по отдельным дисциплинам будет сокращаться, с другой стороны, за счет взаимного группового контроля повысится качество оценочных заданий. Образец такой выгрузки из матрицы 2 представлен в табл.29.

Таблица 29. Образец выгрузки по 3-му семестру из матрицы 2

Наименование дисциплин (модулей)	Форма контроля	Семестр	РО1	РО2	РО3	РО4	РО5	РО6	РО7
Лидерство и команда в организации	Зачет	3						+	+
Современные технологии управления СЭР	Экзамен	3	+	+	+		+
Технологии разработки и принятия УР	Экзамен	3	+	+	+		+
Управление проектами	Зачет	3	+	+	+	+	+	+	+
Управление изменениями	Зачет	3	+	+	+	+	+	+	+
Управленческий консалтинг	Зачет	3	+	+	+	+	+	+	+
Экономическая безопасность на северных территориях России	Зачет	3	+	+	+	+
Качество жизни на Севере	Зачет	3	+	+	+	+
Защита прав коренных малочисленных народов Севера	Зачет	3	+	+	+	+	+		+
Управление государственной и муниципальной собственностью	Зачет	3	+	+	+
Государственные и муниципальные финансы	Зачет	3	+	+	+
Управление человеческими ресурсами	Зачет	3	+	+	+		+	+	+
Технологическая практика	Зачет с оценкой	3	+	+	+	+	+	+	+

При необходимости матрицу можно дополнять и другими столбцами с важными для принятия решений данными, например, с информацией о том, является дисциплина обязательной или элективной.

Этап 4. Разработка карты оценочных заданий по образовательной программе

В карте оценочных заданий по образовательной программе отражаются сведения о том, какие оценочные задания предусмотрены по элементам учебного плана или по периодам обучения (в случае, если имеются полидисциплинарные задания). Разработка карты осуществляется на основе матрицы 2 и также производится формате EXCEL (табл.30).

Таблица 30. Образец выгрузки из карты оценочных заданий по 1-му семестру

Наименование дисциплин (модулей)	Форма контроля	Семестр	РО1	РО2	РО3	РО4	РО5	РО6	РО7	Оценочное задание
Философия и методология науки	Экзамен	1	+			+				Подготовка и обсуждение эссе
Теория и механизмы современного гос.управления	Экзамен	1	+	+	+	+	+			Подготовка и обсуждение интеллектуальной карты
Педагогика и психология высшей школы	Зачет	1				+		+	+	Подготовка сценария и проведение деловой игры по ГМУ для бакалавров
Иностранный язык в профессиональной сфере	Зачет	1		+		+	+		+	Подготовка доклада на основе обзора статей по вопросам ГМУ на иностранном языке
Муниципальное управление и местное самоуправление	Экзамен	1	+	+	+		+			Подготовка проекта официального письма с предложениями по развитию местного самоуправления
Микро и макроэкономика	Зачет	1	+	+	+					Подготовка и защита реферата
Учебная практика	Зачет с оценкой	1	+		+		+	+	+	Подготовка самоанализа по итогам учебной практики
Научно-исследовательская работа (НИС)	Зачет с оценкой	1	+	+	+	+	+	+	+	Подготовка и защита плана ВКР

Проведение анализа наборов оценочных заданий по семестрам позволит определить загруженность студентов и обсудить возможность разработки полидисциплинарных заданий или учета результатов выполнения заданий по одной дисциплине в рамках выполнения оценочного задания по другой дисциплине. Карта удобна для преподавателя при разработке оценочного задания, т.к. отображает результаты обучения по образовательной программе, которые необходимо учесть и формы контроля. Также преподаватель может увидеть в сводной карте задания по другим дисциплинам - это ценная информация для развития сотрудничества и учета загрузки студентов.

В карте оценочных заданий по образовательной программе можно также отмечать те задания, по которым предусмотрено участие в оценочном мероприятии внешних экспертов (например, преподавателей смежных дисциплин или с других факультетов, а также представителей профессионального сообщества или экспертов). Таким образом, карта становится источником информации о том, кто является партнером образовательной программы, в том числе и на постоянной основе. Участие внешних экспертов позволит повысить независимость оценки, мотивацию и ответственность студентов и преподавателей. Кроме того, это хорошая возможность получить обратную связь по поводу содержания оценочного задания и качества оценочной рубрики.

Этап 5. Разработка оценочных рубрик по каждой дисциплине на основе матриц 1 и 2 (оценочные рубрики в формате MS EXCEL).

Для того, чтобы модель оценивания заработала в полную силу, необходим охват каждого элемента учебного плана. Так, оценочные рубрики должны быть разработаны для каждой дисциплины и практики. Образец оценочной рубрики представлен в табл.31.



Таблица 31. Образец оценочной рубрики

Оценочное задание	Отлично	Очень хорошо	Хорошо	Удовле-твори-тельно	Неудовле-твори-тельно	Результаты обучения по дисциплине	Результаты обучения по ОП
	А,В	С	D	E	F,FX
	Баллы: 5	Баллы: 4	Баллы: 3	Баллы: 2	Баллы: 1
…	…	…	…	…	…	РО.Д1	РО1
						РО.Д2	РО4
						РО.Д3	РО6

Как отмечали авторы подхода All-in-One, разработка оценочных рубрик - трудоемкий и сложный процесс. Для того, чтобы минимизировать затраты времени и ресурсов на этапе разработки и внедрения модели, предлагаем установить для каждого элемента учебного плана по одному оценочному заданию и разработать, соответственно, по одной оценочной рубрике. Возможно, некоторые результаты обучения по дисциплине могут оказаться «неохваченными» данным комплексным оценочным заданием. Для этого можно использовать другие оценочные задания, например, тест или устный экзамен по дисциплине. Но обязательным требованием к этому контрольному оценочному заданию, результаты оценивания по которому будут учитываться на уровне образовательной программы в целом, является его ориентированность на результаты обучения по программе. Со временем преподаватели, освоив методику, смогут расширять и дополнять свои оценочные рубрики и другими оценочными заданиями.

Этап 6. Описание этапов и инструментов сбора и анализа данных результатов оценивания.

Схема сбора и анализа данных результатов оценивания включает несколько важных шагов, представленных в табл.32.



Таблица 32. Этапы сбора данных результатов оценивания по образовательной программе

Этап	Инструмент	Сроки	Ответственный
1. Оценивание	Оценочная рубрика	Во время процедуры оценивания	Преподаватель
2. Формирование сводного листа результатов оценивания по дисциплине	Сводный лист результатов выполнения оценочного задания по группе (СЛ-1)	По окончании процедуры оценивания	Преподаватель
3. Формирование индивидуальных листов по каждому студенту за семестр	Индивидуальный лист результатов выполнения оценочных заданий за семестр (ИЛ)	По окончании промежуточной аттестации	Руководитель или менеджер программы
4. Формирование сводного листа по каждому результату обучения за семестр по группам студентов	Сводный лист результатов оценивания по РОn за семестр по группе студентов (СЛ-2)	По окончании промежуточной аттестации	Руководитель или менеджер программы
5. Формирование сводного листа распределения студентов по уровням освоения РО за семестр	Сводный лист распределения студентов по уровням освоения РО за семестр (СЛ-3)	По окончании промежуточной аттестации	Руководитель или менеджер программы

На этапе внедрения модели оценивания необходимо отработать процедуру сбора данных. Большое количество форм не должно вызывать беспокойства, поскольку процесс сбора и обработки данных можно автоматизировать с помощью программы MS EXCEL. Тем не менее, заполнение формы СЛ-1 (табл.33) желательно проводить в письменном виде, т.к. эта форма должна быть подписана преподавателем.



Таблица 33. Образец сводного листа результатов оценивания по дисциплине (СЛ-1)