Оценка уровня сформированности компетенций с использованием весовых коэффициентов
компетенция обучающийся портфолио аттестация
Очевидно, что традиционные методы контроля текущей и промежуточной аттестации ориентированы на проверку знаний и умений по отдельным дисциплинам, в то время как многие компетенции могут быть сформированы только при комплексном применении знаний, полученных при изучении нескольких предметов.
При существующей организации учебного процесса усилить компетентностный подход к контролю качества усвоения образовательных программ можно используя межпредметные курсовые работы. То есть слово «курс» отождествляется не со словом «предмет», а с определенным периодом обучения. В курсовой работе обучающийся должен продемонстрировать свою компетентность применения знаний и умений, полученных за предшествующий период обучения. В то же время необходимо учитывать, что результаты выполнения курсовых работ, доклады на научных семинарах и конференциях позволяют делать выводы об уровне компетентности автора в узкой области, но не свидетельствуют о полном освоении образовательной программы.
Отметим здесь также условность используемых шкал оценок. Традиционно в России для оценки результатов знаний, освоения учебного материала используется четырехбальная шкала: неудовлетворительно, удовлетворительно, хорошо и отлично. Признавая чрезмерную усредненность такой шкалы, многие образовательные организации применяют на промежуточном этапе рейтинговые системы оценок (что соответствует болонской системе), которые в итоге также переводятся в указанные выше оценки. Это обусловлено необходимостью сопоставления оценок, данных разными образовательными организациями.
Применительно к оценкам уровня сформированности компетенций не существует единой шкалы. При этом практика показывает, что фактически также используется четырехуровневая шкала с вариациями названий уровней и их значимости. В данной работе мы не будем акцентировать внимание на шкале оценки компетенций, а рассмотрим исходные данные и методы их обработки для получения некоторой количественной характеристики, связанной с уровнем владения той, или иной компетенцией выпускником образовательной организации. Подчеркнем, что в работе не ставится цель получить строгий алгоритм вычисления оценок уровня сформированности компетенций. Речь идет о том, чтобы на основе сложившейся практики накопления информации о траектории образовательной деятельности обучающегося в образовательной организации получить некоторые числовые параметры, характеризующие обладание компетенциями, предусмотренными федеральным образовательным стандартом по соответствующему направлению (специальности).
В работе [10] при анализе используемых различными авторами методов оценки сформированности компетенций указывается, что «как правило, сформированность компетенций оценивается с помощью расчета с использованием статистических методов оценки, таких как критерий Камера-Уэлча, критерия Хи-квадрат, j-углового преобразования Фишера, экспертной оценки, Т-критерия Вилкоксона данных анкетирования.
При использовании статистических методов обработки социальной информации необходимо особое внимание обращать на первичный отбор и накопление данных. Общеизвестно, что основываясь на нерепрезентативной выборке нельзя получить достоверные выводы, каковыми бы не были точными математические методы. При оценке уровня сформированности компетенций процедура отбора исходных данных, по нашему мнению, имеет первостепенное значение.
Например, в работе [8] представлен метод построения оценки компетенций на основе статистической обработки практически всей совокупности различных оценок обучающегося, полученных им во время учебы. Другие авторы делают основной упор на результатах выполнения обучающимся творческих работ, представленных им в портфолио. При этом не существует единого подхода к формированию этого портфолио.
Федеральными образовательными стандартами третьего поколения предусмотрено создание образовательными организациями, реализующими программы высшего профессионального образования, информационно-образовательной среды, составным элементом которой является портфолио обучающегося. Стандарт не определяет состав портфолио. Оговариваются лишь некоторые его составляющие: «…в том числе сохранение работ обучающегося, рецензий и оценок на эти работы со стороны любых участников образовательного процесса» [2]. В свете компетентностного подхода к итогам образовательного процесса представляется, что работодатель на основе портфолио молодого специалиста сможет сформировать собственное мнение о компетентности выпускника для его сферы деятельности.
Информационным системам формирования портфолио обучающегося в последнее время уделяют внимание практически все образовательные организации. При этом полнота накапливаемых данных зачастую зависит от уровня информатизации основных видов учебной деятельности и используемых информационных систем. В одних образовательных организациях в портфолио обучающегося включаются только творческие работы, курсовые проекты. С примером такого портфолио можно познакомиться на сайте Нижегородского технического университета [14]. Другие организации создают надстройки (плагины) для эксплуатируемых образовательных систем. Пример такого подхода изложен в работе [16]. Некоторые идут по пути использования общедоступных ресурсов сети Интернет, например, [5].
Накопление большого объема информации о результатах учебной, творческой деятельности обучающегося [5], несомненно, может помочь работодателю с выбором соискателя вакансии. Но необходимо учитывать и психо-физиологические особенности восприятия информации. При большом числе рассматриваемых однородных объектов человеку свойственно усреднять количественные характеристики. Также присутствует эффект разного распределения памяти по объектам в зависимости от их последовательности восприятия и образности. Оценить уровень сформированности компетенций обучающегося путем механического сложения результатов оценок работ из портфолио затруднительно.
Во всех приведенных выше примерах на второй план уходит академическая успеваемость обучающегося по предметам. Возможно, разработчики портфолио полагают, что её результаты отражаются в выписке к диплому государственного образца. В то же время отметим, что далеко не каждый выпускник образовательной организации имеет в своем багаже научные публикации, грамоты и дипломы за победы на научных конференциях. С другой стороны, даже большое количество наград в одной узкой области не свидетельствует о высоком качестве освоения образовательной программы.
Возвратимся к компетентностному подходу оценки результатов освоения образовательной программы. Нам представляется, что базовая оценка сформированности компетенций обучающегося должна проводиться на основе результатов промежуточных аттестаций по изученным дисциплинам. Эти результаты должны быть неотъемлемой частью портфолио обучающегося. Почеркнем, что речь идет не о сводной ведомости оценок по предмету, а о её трансформации на совокупность компетенций в соответствие с матрицей компетенций основной образовательной программы. Наличие или отсутствие в портфолио обучающегося дипломов и грамот влияет на высший уровень владения компетенциями.
Считаем, что было бы некорректно делать оценку уровня сформированности компетенций на основе среднего бала по дисциплинам, хотя бы потому, что при этом возникнет проблема учета оценки «зачтено». Если проанализировать рабочие программы по отдельным дисциплинам, то можно обратить внимание, что некоторые компетенции при изучении дисциплины формируются только частично. Эти части далеко не равномерно разделены между предметами. Таким образом, нам представляется необходимым дополнить матрицу компетенций, входящую в основные образовательные программы по направлениям подготовки (специальностям), весовыми коэффициентами. Указанные коэффициенты должны определять значимость содержательной части дисциплины для формирования той, или иной компетенции. В такую систему легко вписываются и дисциплины, изучение которых заканчивается сдачей зачета. Оценки «отлично» и «зачтено» при таком подходе соответствуют 100% вкладу доли дисциплины в итоговый результат, а оценки «хорошо» и «удовлетворительно» снижают эту долю до 75% и 50% соответственно. Последние два числовых показателя условны.
Также в матрицу компетенций необходимо включить результаты оценки курсовых работ, особенно это важно, когда при выполнении курсовой работы используются знания и умения, полученные при изучении нескольких дисциплин. В интегрирующую матрицу компетенций должны быть включены результаты производственных практик и успехи обучающегося в конкурсно-оценочных мероприятиях. Значения весовых коэффициентов составных элементов портфолио обучающегося должны устанавливаться в зависимости от направления подготовки (специальности).
Введение весовых коэффициентов дисциплин в матрицу компетенций позволит получать оценку уровня сформированности компетенций обучающегося на любом этапе освоения им образовательной программы. Предлагаемый в работе формализованный метод оценки компетенций может быть автоматизирован на основе имеющихся в образовательных организациях информационных ресурсов, входящих в электронную информационно-образовательную среду. Одним из вариантов такого решения может быть использование электронного журнала [11] с результатами промежуточных аттестаций.
Предлагаемый метод весовых коэффициентов составных частей портфолио обучающегося позволяет при необходимости учесть узкие «корпоративные» интересы работодателя. Имея несколько наборов весовых коэффициентов (матриц компетенции), можно определить предпочтительные сферы будущей деятельности выпускника образовательной организации, а также получить несколько оценок, ориентированных на разных потребителей.
Числовые величины оценок уровней сформированности отдельных компетенций могут быть в дальнейшем использованы для вычисления единого интегрального показателя качества освоения образовательной программы обучающимся. Такой интегральный показатель также должен вычисляться на основе специальных весовых коэффициентов, определяющих условную роль отдельных компетенций для соответствующей профессии.
Заключение
В заключение отметим, что по многим дисциплинам оценки, получаемые обучающимися на промежуточных аттестациях, несут в себе в разной доли субъективную составляющую преподавателя, влияние некоторых случайных факторов. Предлагаемый в работе метод оценивания уровня сформированности компетенций позволит усреднить влияние этих факторов. В тоже время внесение в матрицу компетенций весовых коэффициентов также подвержено влиянию субъективного фактора. Для минимизации этого влияния необходимо, чтобы данные коэффициенты обсуждались высококвалифицированными специалистами, имеющими опыт межпредметной работы, с последующим утверждением ученым советом образовательной организации.
Качественная подготовка специалистов невозможна без обратной связи с заказчиком. Это относится также и к построению системы оценки этого качества. Образовательная организация должна проводить мониторинг успешности своих выпускников, анализировать соответствие своих оценок уровня сформированности компетенций с результатами производственных успехов выпускников и вводить коррективы в весовые коэффициенты матрицы компетентности.
Библиография
1. Об образовании в Российской Федерации [Электронный ресурс] : федеральный закон от 29 декабря 2012 г. № 293-ФЗ .- Режим доступа : http://www.consultant.ru/document/cons_doc_LAW_140174/ (Дата обращения 31.05.2016).
2. Федеральный государственный образовательный стандарт высшего образования уровень высшего образования подготовка кадров высшей квалификации направление подготовки 40.06.01 юриспруденция [Электронный ресурс] . - Режим доступа: http://www.consultant.ru/document/cons_doc_LAW_174550/ (Дата обращения 31.05.2016).
3. Об утверждении порядка организации и осуществления образовательной деятельности по образовательным программам высшего образования - программам бакалавриата, программам специалитета, программам магистратуры [Электронный ресурс] : приказ Министерства образования и науки Российской Федерации от 19.12.2013 № 1367. - Режим доступа: http://base.consultant.ru/cons/cgi/online.cgi?req=doc&base=LAW&n=175362 (Дата обращения 05.06.2016).
4. О целевых показателях эффективности работы бюджетных образовательных учреждений, находящихся в ведении министерства образования и науки российской федерации [Электронный ресурс] : приказ Министерства образования и науки Российской Федерации от 8 ноября 2010 г. № 1116. - Режим доступа: http://base.consultant.ru/cons/cgi/online.cgi?req=doc;base=LAW;n=119953 (Дата обращения 05.06.2016).
5. Portfolio. Создайте бесплатно портфолио онлайн [Электронный ресурс].- Режим доступа: http://4portfolio.ru/ (Дата обращения 01.06.2016).
6. Барахоева А.Р. Методика оценки компетенций студентов бакалавров направления Юриспруденция [Электронный ресурс] . - Режим доступа: http://yspu.org/images/1/1c/%D0%91%D0%B0%D1%80%D0%B0%D1%85%D0%BE%D0%B5%D0%B2%D0%B0_%D0%90%D0%A0.pdf (Дата обращения 01.06.2016).
7. Баринова О.В. Понятие и сущность компетенции [Электронный ресурс] // Педагогические науки, 2014 .- №19-1.- Режим доступа: http://novainfo.ru/article/1935 (Дата обращения 31.05.2016).
8. Бочагов О.В. Один из инновационных методов оценки компетенций студентов [Текст] // Инновации в образовании, ИнВестРегион, 2010.- №2. - С. 63-66.
9. Зима В. Модель компетенций. Часть 1: как составить и оценить модель [Электронный ресурс] .- Режим доступа: http://www.hr-journal.ru/articles/oap/oap_892.html (Дата обращения 01.06.2016).