Добавил:
ivanov666
Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз:
Предмет:
Файл:Роль университетов в инновационном развитии регионов инструменты и методы оценки влияния.pdf
3. Инструменты оценки влияния университетов на региональное развитие
Ɍɸɦɟɧɫɤɚɹ
ɋɬɚɜɪɨɩɨɥɶɫɤɢɣ ɤɪɚɣ
Ɋɟɫɩɭɛɥɢɤɚ ɋɚɯɚ (əɤɭɬɢɹ)
Ɋɟɫɩɭɛɥɢɤɚ Ⱦɚɝɟɫɬɚɧ
Ʉɚɥɢɧɢɧɝɪɚɞɫɤɚɹ ɨɛɥɚɫɬɶ
Ɋɟɫɩɭɛɥɢɤɚ Ɇɨɪɞɨɜɢɹ
ɍɥɶɹɧɨɜɫɤɚɹ ɨɛɥɚɫɬɶ
Республика Удмуртия
ɍɞɦɭɪɬɫɤɚɹ Ɋɟɫɩɭɛɥɢɤɚ
ɇɚɭɤɚ ɉɚɪɬɧɟɪɫɬɜɨ Ɉɛɪɚɡɨɜɚɧɢɟ
Рис. 21. Результаты оценки технической эффективности регионов Российской
Федерации по уровню развития образовательных систем
ɨɛɥɚɫɬɶ
1,00
0,80
0,60
0,40
0,20
0,00
ɉɟɪɦɫɤɢɣ ɤɪɚɣ
Ɍɨɦɫɤɚɹ ɨɛɥɚɫɬɶ
Ɋɟɫɩɭɛɥɢɤɚ Ɍɚɬɚɪɫɬɚɧ
Ɋɟɫɩɭɛɥɢɤɚ Ȼɚɲɤɨɪɬɨɫɬɚɧ
ɋɚɦɚɪɫɤɚɹ ɨɛɥɚɫɬɶ
Ɉɪɟɧɛɭɪɝɫɤɚɹ ɨɛɥɚɫɬɶ
Ȼɟɥɝɨɪɨɞɫɤɚɹ ɨɛɥɚɫɬɶ
ȼɨɪɨɧɟɠɫɤɚɹ ɨɛɥɚɫɬɶ
3.3. Академическая добавленная стоимость
как показатель оценки деятельности университетов
В условиях повышенного интереса к результативности систем
образования, усиления транспарентности к государству и обществу формируются новые инструменты оценки эффективности на
основе понятия академической добавленной стоимости. Академическая добавленная стоимость может служить инструментом
оценки степени улучшения/усиления знаний, навыков и способностей обучающихся в перио
д обучения, наделения их возможностями критического мышления, рефлексии на происходящие события
и изменения, а также способности обучаться в течение всей жизни.
Получаемые на основе академической добавленной стоимости результаты позволяют сравнивать качество образовательных учреждений, обладающих различным уровнем студенческого контингента. Концепция академической добавленной стоимости отражает
влияние внешних факторов, част
о не имеющих отношения к об-
101
Роль университетов в инновационном развитии регионов
разовательному процессу, на уровень достижений учащихся. При
этом она поднимает вопросы доступности и качества образования
в целом, более важные, чем вопрос о его результативности, и заставляет исследователей в области образования переходить к оценке результатов обучения, а не входных параметров (прежде всего,
таких, как объем финансирования и профессиональный уровень
преподавательского со
става).
Понятие добавленной стоимости, зародившись в сфере экономики и бизнеса как способ измерения экономической эффективности предприятия или компании, в настоящее время активно
применяется в академической сфере для оценки качества и эффективности образовательных систем и институтов.
Каждая система или образовательное учреждение могут быть
оценены с точки зрения эффективности, например, сре
дств, затраченных государством на образование за определенный период на
основании значений, непосредственно или косвенно свидетельствующих о заметных качественных изменениях благодаря воздействию системы образования. Прежде всего речь идет об учащихся
или выпускниках образовательных учреждений, объем знаний и
навыков которых изменился в период обучения в отдельном образовательном учреждении. Ре
чь также может идти о качестве национального рынка труда, когда по результатам замера академической добавленной стоимости, проводимого в общенациональном
масштабе, формируется оценка качества профессиональной подготовки кадров для национальной экономики.
Оценка академической добавленной стоимости, например, в
практике американской системы управления образованием сегодня является одним из ключевых источников информации о со
стоянии национальной системы образования наряду с академическими
рейтингами и ранжированиями.
Однако прежде чем стать таковыми, подобные системы оценки качества преодолели долгий путь развития качества, надежности и транспарентности получаемых результатов.
В профессиональной зарубежной литературе понятие акаде-
мической добавленной стоимости исследуется с разных позиций.
102
3. Инструменты оценки влияния университетов на региональное развитие
Беннет (Bennett) отмечает, что академическая добавленная
стоимость показывает изменения в уровне навыков и знаний учащихся как результатов обучения в образовательных учреждениях
[56]. Измерение академической добавленной стоимости требует
наличия информации об уровне знаний и навыков при поступлении в образовательное учреждение (параметры входа) и по его
окончанию, после того как учащиеся получили все преимуще
ства
от обучения (параметры результата). Добавленная стоимость образования, таким образом, обозначает разницу между входными
параметрами и параметрами результатов учащихся. Иными словами, ту разницу, что привнесло в уровень владения знаниями и навыками учащихся обучение в образовательном учреждении.
Определение Цуна (Cunha) и Миллера (Miller) также подчер-
кивает прирост знаний и навыков учащих
ся в период их пребывания в образовательном учреждении как ключевую характеристику понятия «академическая добавленная стоимость» [57]. Но при
этом связь понятия с определенными характеристиками учащегося
(например, его специализацией) существенно усложняет процесс
измерения добавленной стоимости, прежде всего, для сферы высшего образования (у выпускников медицинского и математического факультетов в проце
ссе обучения по специальностям формиру-
ются абсолютно разные знания и навыки).
Определение Харви (Harvey) и Грина (Green) подчеркивает
связь понятия академической добавленной стоимости с вопросами обеспечения качества в сфере образования [58]. Академическая
добавленная стоимость рассматривается как мера качества, степень повышения знаний и навыков студентов. При этом не каждое
образовательное учреждение способно обеспечить высок
ую степень приращения знаний и навыков у своих учащихся. Доказано,
что образовательные учреждения, обладающие высоким статусом,
демонстрируют более низкую академическую добавленную стоимость, поскольку они априори ориентированы на привлечение лучших абитуриентов, обладающих выдающимися входными параметрами. И наоборот, образовательное учреждение, стремящееся
заработать статус эффективного, предоставляющего качественные
103
Роль университетов в инновационном развитии регионов
образовательные услуги, демонстрирует более высокий прирост
знаний, навыков и способностей своих выпускников, даже если
их входные параметры были не столь выдающимися. В конечном
счете все зависит от того, что именно понимается под качеством
образования. Степень же добавленной стоимости, которую демонстрирует образовательное учреждение, зависит от избираемой методологии измерения.
Харви отмечает мно
жество попыток оценки добавленной стоимости для сферы образования, например исследование Совета по
национальному академическому признанию 1990 г. В рамках этого
исследования академическая добавленная стоимость рассматривалась как степень улучшения/усиления знаний, навыков студентов
в период обучения, степень наделения их возможностями критического мышления, рефлексии на происходящие события и изменения и спо
собность обучаться в течение всей жизни. Интерес к
оценкам академической добавленной стоимости, по мнению Харви, был продиктован всплеском академических рейтингов для каждого уровня образования и неутихающих дискуссий относительно
их результатов и трудоустройства выпускников образовательных
учреждений. Тем не менее оценка академической добавленной
стоимости с точки зрения процедур оставалась чрезвычайно сло
жной, что обусловливало использование большинством разработчиков подхода к измерению разницы входящих параметров и параметров результатов (или способностей учащихся), основанного на
многообразных, но приближенных индикаторах. Количественный
анализ академической добавленной стоимости осложнен рядом
причин, в том числе трудностью определения необходимых эталонов, относительно которых производится оценка, проблемами
измерения как такового, в
оздействием на добавленную стоимость
специфики конкретной образовательной программы. Однако бесспорно то, что оценка академической добавленной стоимости составляет основу измерения качества образования на уровне отдельных образовательных программ.
Достижения учащихся, непосредственно влияющие на эффективность и, следовательно, востребованность образовательного
учреждения, должны измеряться на основании добавленной сто-
104
3. Инструменты оценки влияния университетов на региональное развитие
имости, учитывающей базовый уровень владения учащимися знаниями и навыками и результаты, полученные в период обучения.
Эта информация в агрегированном виде должна быть открыта для
студентов, потребителей и лиц, ответственных за политику в области образования, и представлять в доступной для понимания форме способ оценки относительной эффективности различных образовательных учреждений, шк
ол, колледжей и университетов [59].
Анализ понятия академической добавленной стоимости показывает, что в первую очередь с его помощью описывается результат некоторых процедур, позволяющих получить необходимую
оценку качества или эффективности образовательных систем, образовательных институтов. Конечная цель оценки академической
добавленной стоимости (оценка эффективности отдельного образовательного учреждения, национальной образовательной системы или к
ачества отдельных образовательных программ) обусловливает наличие различных систем такой оценки. Каждая система
применяет свои модели статистической оценки, которые, в свою
очередь, дифференцируются в зависимости от анализируемого
уровня образования (среднее или высшее). Сложность и разнообразие этих процедур говорят о концептуальной проработке понятия. Обратимся к описанию соответствующей к
онцепции.
Исследователи академической добавленной стоимости отмечают, что системы оценки не представляют собой какого-то определенного формата тестирования. Скорее, они относятся к моделям, с помощью которых возможна интерпретация результатов
тестов в контексте лонгитюдного прироста и прогресса в образова-
тельных достижениях учащихся в течение определенного периода
времени (как правило, за не
сколько лет обучения в образователь-
ном учреждении).
Системы оценки академической добавленной стоимости часто
сравнивают с подсчетом прироста баллов (growth scores), который
широко используется при оценке результатов обучения. Оценка
академической добавленной стоимости отражает уровень образовательных достижений учащихся, она отличается от традиционных методов, например подсчета баллов, в которых количество
говорит о ре
зультатах обучения.
105
Роль университетов в инновационном развитии регионов
Традиционно прирост баллов рассчитывается как разница
между количеством баллов, полученных учащимся в текущем и
прошедшем учебном году.
Главным отличием оценки академической добавленной стоимости от обычного подсчета прироста академических баллов является использование сложных статистических формул, исключающих из анализа факторы, имеющие необразовательный характер,
такие как социальный статус учащегося, экономическое положение ег
о семьи, а также демографические факторы. Исключение
факторов, не имеющих отношения к образованию, позволяет получить «чистую» оценку достижений и результатов учащегося. Более
того, оценка академической добавленной стоимости интерпретируется как результат прямого влияния на уровень образовательных
достижений учащегося факторов, носящих исключительно образовательный характер, таких как влияние преподавателя, образов
ательного учреждения, месторасположения образовательного уч-
реждения [60].
Основным положением концепции академической добавленной стоимости является утверждение о том, что образовательное
учреждение несет ответственность за качественный прирост знаний и навыков у учащихся в течение учебного года. При этом если
измерение академической добавленной стоимости отражает «чистое» воздействие преподавателей и образовательных учреждений
на до
стижения учащихся, то оно также дает ответ на вопрос о том,
насколько достаточным было такое воздействие.
Каждая система оценки академической добавленной стоимости формулирует то, что составляет основу прогресса учащегося
в течение одного учебного года. Например, в системе TVAAS при
расчете «одного года прогресса» за основу принимается индивидуальная история образовательных до
стижений учащегося [61].
В конце учебного года подсчитываются результаты. Если годовые достижения учащегося составили «один год прогресса», это
интерпретируется как то, что обучение было эффективным. Если
учащийся продемонстрировал результаты, составляющие более
«одного года прогресса», это расценивается как то, что в течение
106
3. Инструменты оценки влияния университетов на региональное развитие
года обучение было высокоэффективным. И наоборот, если при
подсчете результатов за год достижения учащегося составили менее «одного года прогресса», обучение оценивается как неэффективное.
Последователи концепции академической добавленной стоимости подчеркивают, что более важным при ее оценке является
фактор влияния преподавателей на текущие и будущие образовательные достижения учащихся, а не любой др
угой фактор, не
имеющий отношения к сфере образования. По оценкам исследователей, в случае если учащиеся в течение года получают неэффективное обучение, то их достижения в конце года не будут выдающимися, и наоборот. Системы оценки академической добавленной
стоимости также свидетельствуют в пользу доминирующей роли
преподавателей в уровне образ
овательных достижений учащихся.
Отличием систем оценки академической добавленной стоимости от традиционных подсчетов прироста академических баллов учащихся является также наличие необходимых ресурсов. Для
оценки академической добавленной стоимости в рамках отдельной образовательной системы необходимо выполнение следующих условий:
– должна существовать система учета образовательных достижений учащихся за определенный период времени, а т
акже соци-
ально-демографические данные об учащихся;
– база данных образовательных достижений должна охватывать весь контингент учащихся по стране в целом, т. е. носить общенациональный характер;
– технические возможности базы данных должны позволять
осуществлять сложные статистические расчеты, в частности, с использованием индивидуальных профайлов образовательных достижений учащих
ся целого города или региона.
В целях обеспечения независимости оценки академической
добавленной стоимости ее необходимо выполнять, основываясь
на результатах надежных общенациональных опросов учащихся,
которые проводятся не реже одного раза в год и итоги которых репрезентативны для каждого уровня образования.
107
Роль университетов в инновационном развитии регионов
Исследования показывают, что оценка должна выполняться на
основе шкалированных значений, равно как и результаты оценки
академической добавленной стоимости должны представляться
в виде данных, размещаемых на шкале, соответствующей континууму образовательных достижений, отражающему прогресс за
определенный период времени. Использование шкалированных
значений для расчета академической добавленной стоимости
обеспечивает более надежные результаты по сравнению с т
аки-
ми инструментами, как ранжирование по величине процентиля
(percentile ranks) или по эквиваленту нормального распределения
(normal curve equivalents).
Сторонники оценки академической добавленной стоимости
убеждены, что получаемые на ее основе результаты дают возможность сравнивать качество образовательных учреждений, обладающих различным уровнем студенческого контингента. Это
убеждение основано на результатах некоторых исследований (таких, на
пример, как исследование «Равенство образовательных возможностей» Коулмена), согласно которым наибольшее влияние
на уровень образовательных достижений учащихся оказывают
социо экономический статус и их демографические особенности, а
не учителя и образовательные учреждения. С момента публикации
результатов этих исследований оценка образовательных учреждений в большей степени опиралась на измерение входных параметров, таких ка
к объем финансирования образовательного учреждения и сертификация преподавателей, и в меньшей – на результаты
тестирования образовательных достижений учащихся. Однако
с течением времени и наступлением новой эпохи подотчетности
образовательных систем государству и обществу исследования в
области образования все чаще стали обращать внимание на реальный вклад качества преподавания в уровень образовательных достиж
ений учащихся, измеряемого с помощью стандартизованных
систем оценок. Наряду с исследованиями влияние качества преподавания на общий уровень образовательных достижений учащихся
также подтверждается родителями и опытом других стейкхолдеров, сталкивающихся с примерами эффективности преподавания в
своей повседневной жизни.
108
3. Инструменты оценки влияния университетов на региональное развитие
Таким образом, концепция академической добавленной стоимости, несмотря на внешнее сходство с различными оценками динамики образовательных результатов, существенно отличается от
традиционных процедур подсчета прироста баллов учащихся по
завершении очередного года обучения.
Требование наличия необходимых ресурсов для проведения
оценки академической добавленной стоимости и опора на статистические процедуры обеспечивают надежность получаемых
зультатов, а также относительную фундаментальность подхода
ре
в целом.
3.4. Методика построения индекса для оценки вовлеченности университетов в региональное инновационное развитие
Инновационное развитие региона, выраженное в динамике
индикаторов производства, применения и распространения новых
научных знаний в новой продукции и технологических укладах,
является результатом синергетического эффекта от реализации
интеллектуального потенциала университета и иннов
ационного
потенциала региона. Для оценки влияния университета на инновационное развитие региона предлагается использовать Индекс
вовлеченности университетов в региональное инновационное развитие ИВУРИР-31, который как интегральный показатель включает в себя набор индикаторов, позволяющих оценить возможности
университета включиться в инновационные процессы в регионе,
способности региональной экономики воспринять вклад университетов в ее иннов
ационное развитие и степень изменений в
инновационных процессах в регионе в результате участия в них
университетов. Рассматриваемый подход базируется на применении методологии многомерного ранжирования вклада университетов в региональное инновационное развитие, предполагающей
оценку и нормирование методом линейного масштабирования
31 показателя Росстата. Показатели объединены в группы: уровень
инновационного развития региона, иннов
ационный потенциал региона и интеллектуальный потенциал университета для развития
региона. Результаты исследования и применение предлагаемого
109
Роль университетов в инновационном развитии регионов
индекса обладает большим потенциалом в оценке эффективности
и качества инновационного развития регионов для мониторинга
их инвестиционных перспектив и целей государственного управления, дают возможность представить детальную и объективную
картину оценки степени вовлеченности университетов в региональное инновационное развитие.
Проблема поиска индикаторов для оценки роли и влияния
университетов, их вовлечения (engagement) в иннов
ационное развитие региона актуальна в условиях необходимости построения
инновационной экономики, в которой университеты становятся
одним из ведущих звеньев национальной и региональной инновационных систем. Феномен регионального экономического роста
и позитивного влияния на него академических институтов через
трансфер результатов R&D от университетов к другим акторам
региональной инновационной системы, а также возникающие
спиллов
ер-эффекты активно обсуждаются в зарубежной и отечественной литературе продолжительное время. В целом разработке
системы критериев для оценки инновационного развития регионов и совокупности показателей, позволяющих произвести подобную оценку, в отечественной и зарубежной литературе уделяется
немало внимания.
В отечественной литературе также обсуждаются подходы к
анализу влияния университетов на инновационное развитие регионов и оценки их ро
ли в данном процессе.
Актуальным остается поиск методики, позволяющей комплексно оценить вклад университетов в инновационное развитие региональных систем. Настоящее исследование продолжает традицию
методологического поиска количественной оценки вклада университетов в региональное развитие, так как это направление требует
дальнейшего анализа.
Для адекватной и об
ъективной оценки уровня развития инновационных систем согласно методологии «Руководства Осло» объектами оценки следует выбирать сектора инновационной деятельности – составляющие инновационной экосистемы [62].
110