Методология Московского международного рейтинга вузов "Три миссии университета", 2021 год
←
→
Транскрипция содержимого страницы
Если ваш браузер не отображает страницу правильно, пожалуйста, читайте содержимое страницы ниже
Методология Московского международного рейтинга вузов «Три миссии университета», 2021 год Первый проект методологии Московского международного рейтинга вузов был сформирован по итогам масштабного общественного обсуждения, в котором приняли участие свыше 100 организаций — университетов, советов ректоров, экспертных ассоциаций и рейтинговых агентств. Перечень критериев рейтинга был представлен к рассмотрению Международному экспертному совету рейтинга, в который входят 25 авторитетных специалистов в сфере высшей школы, представляющих США, Великобританию, Бразилию, Китай, Индию, ЮАР, Иран, Италию, Бельгию, Турцию, Польшу и Россию. После выхода в декабре 2017 года пилотной версии рейтинга консультации с экспертами были продолжены. По итогам обратной связи некоторые показатели рейтинга подверглись коррективам, а список университетов-участников рейтинга был расширен до 500 университетов. В 2019 году в шорт-лист вошло более 1700, в 2020 г.— более 1800, а в 2021 г.— более 2000 вузов, представляющих 119 стран и территорий. Шорт-лист участников Основу шорт-листа Московского международного рейтинга вузов в 2021 году составил шорт- лист рейтинга 2020 года, насчитывавший около 1800 вузов. Количество вузов, представляющих страну, определялось пропорционально вкладу страны в мировую экономику. В перечень вошли университеты, занимающие ведущие позиции в глобальных академических рейтингах и/или лидирующие в национальных рейтингах из списка IREG Inventory of National Rankings. В ряде случаев отбор осуществлялся на основании количества научных публикаций вуза за период 2016– 2019 гг., индексированных реферативной базой Web of Science Core Collection, согласно данным, полученным с помощью аналитического инструмента InCites. При этом из рассмотрения были исключены узкопрофильные вузы, то есть те из них, которые не имеют образовательных программ в как минимум двух из шести областей знания по классификации ОЭСР, и вузы, не имеющие бакалаврских, магистерских программ и программ Ph.D. (аспирантуры) либо их эквивалентов. Впоследствии из шорт-листа были исключены вузы, численность обучающихся в которых составляет менее 500 человек. Изменения в системе критериев и методике расчёта В методологию рейтинга в 2021 году был внесен ряд изменений, которые коснулись весов критериев и используемых источников. Повысился вес индикатора «Количество массовых открытых онлайн- курсов вуза» (с 5% до 6%). Был снижен вес индикатора «Количество выпускников вуза, которым посвящена отдельная страница в Википедии» (с 8% до 7%). Из индикатора «Транспарентность» был исключен маркер наличия или отсутствия опубликованного списка дипломных программ. Был существенно увеличен охват критерия «Количество массовых открытых онлайн-курсов вуза» – теперь учитывается взвешенная сумма курсов, размещенных на различных платформах из списка агрегатора Class Central, а также платформах «Открытое образование» (Россия) и icourse163.org (Китай). Каждой платформе присваивается вес в зависимости от общего количества слушателей. Источники данных Для составления рейтинга использовались только объективные критерии, одобренные международными экспертами; репутационные опросы полностью исключены. Источниками информации стали открытые данные официальных сайтов университетов и национальных органов власти, а также данные независимых международных источников: провайдер библиометрических данных Clarivate Analytics; крупнейший агрегатор платформ онлайн-курсов Class Central; платформы массового образования «Открытое образование» (Россия) и icourse163. org (Китай); общедоступная многоязычная универсальная энциклопедия «Википедия»;
Методология московского международного рейтинга вузов «Три миссии университета», 2021 год поисковые системы Google, «Яндекс», Baidu; социальные сети Facebook, Twitter, VK, Sina Weibo; компания Alexa, один из мировых лидеров в области веб-аналитики; веб-сайты международных олимпиад студентов; веб-сайты научных премий из списка IREG List of International Academic Awards. Расчёт рейтинга Суммарный вес показателей групп составляет: 45% у группы «Образование», 25% у группы «Наука» и 30% у группы «Университет и общество». По каждому показателю рассчитывался балл вуза, характеризующий его позицию относительно конкурентов. Расчет осуществлялся двумя способами: 1) для нормализованных показателей (глобальная и национальная цитируемость, доля публикаций и транспарентность) балл вузов-участников рассчитывался по формуле: где: xi — балл i-го показателя; ai — значение i-го показателя; amax — максимальное значение i-го показателя; amin — минимальное значение i-го показателя. 2) в случаях, когда линейный расчёт малоприменим, использовался метод нормализации данных. Впоследствии баллы, набранные вузами по каждому из показателей рейтинга, умножались на соответствующие весовые коэффициенты. После этого взвешенные баллы вузов по всем показателям суммировались: где: f — рейтинговый функционал (балл); xi — балл i-го показателя; nx — количество показателей рейтинга; vi — вес i-го показателя. 2
Методология московского международного рейтинга вузов
«Три миссии университета», 2021 год
Критерии Московского международного рейтинга вузов
«Три миссии университета», 2021 год
критерия, %
Смысл критерия
Наименование Источник
Вес
№ Что измеряется и обоснование его Особенности учёта
критерия данных
использования
I. Группа критериев «Образование»
1 Количество побед Конкурен- 7 В отличие от привычных наукометри- Веб-сайты Определялось количество побед в
обучающихся тоспособность ческих показателей, измеряющих международных личных и командных состязаниях
в вузе на студентов успехи сотрудников вузов, олимпиад на 17 международных студенческих
международных инновационный критерий Московского олимпиадах* в период с 2015 г. по
студенческих рейтинга позволяет измерить 2019 г. аналогично «медальному
олимпиадах конкурентоспособность самих студентов. зачёту» Олимпийских игр (учитывались
Критерий показывает качество знаний, победители и призёры олимпиад). При
навыков и умений, полученных этом каждой олимпиаде присваивался
студентами в процессе обучения, и вес в зависимости от странового охвата
способность студентов применять (максимальный вес 1,00 имеет ACM
эти ресурсы для решения сложных ICPC, в которой участвуют студенты из
задач. Количество победителей более чем 100 стран; минимальный
международных студенческих олимпиад вес 0,09 имеют NSUCRYPTO и Belgrade
и других престижных международных Business International Case Competition, в
соревнований не может быть большим, которых участвуют студенты из 9 стран).
тем не менее число победителей и Полученные взвешенные значения
призёров престижных соревнований суммировались.
способно концентрированно показать
результативность образования и
возможности студентов вуза для
прорывных научных исследований.
2 Доля иностранных Привлека- 8 Индикатор, показывающий долю Веб-сайты Иностранные студенты, обучающиеся
студентов тельность иностранных студентов в общем университетов на очной и очно-заочной формах
в общем для иностранных количестве студентов, широко и органов власти обучения по программам бакалавриата,
количестве студентов используется в существующих специалитета, магистратуры
студентов академических рейтингах. и программам подготовки кадров
высшей квалификации, которые
провели в университете более 3
месяцев в рассматриваемом году.
Приводится к общей численности
студентов, обучающихся на очной
форме программ бакалавриата,
специалитета, магистратуры
и программ подготовки кадров высшей
квалификации (ISCED-2011 Levels 6–8).
Численность студентов рассчитывалась
с приведением к эквиваленту полной
нагрузки (full-time equivalent).
3 Отношение Финансовые 15 Этот критерий измеряет уровень Веб-сайты В связи с тем, что в разных странах
бюджета вуза ресурсы финансового благополучия вуза. университетов стоимость продукции, работ и услуг
к количеству Чем выше значение показателя, тем и органов власти может сильно различаться, расчёт
студентов шире спектр возможностей у вуза бюджета производился по паритету
для реализации трёх основных покупательной способности,
миссий — образовательной, научной, определённому Всемирным банком
общественной. (в случае отсутствия — паритету
по данным ОЭСР). Учитывались
студенты очной и очно-заочной форм
обучения программ бакалавриата,
специалитета, магистратуры
и программ подготовки кадров высшей
квалификации (ISCED-2011 Levels 6–8).
Численность студентов рассчитывалась
с приведением к эквиваленту полной
нагрузки (full-time equivalent).
4 Отношение Кадровые ресурсы 15 Показатель фактически измеряет Веб-сайты Численность научно-педагогических
количества НПР степень кадровой обеспеченности университетов работников (профессорско-
к количеству университета. Чем больше и органов власти преподавательский состав и научные
студентов преподавателей и научных работники) рассчитывалась
работников приходится в расчёте с приведением к полной ставке (full-time
на студента, тем больше внимания equivalent). При расчёте численности
сотрудники вуза могут уделить студентов учитывалась численность
каждому студенту и, следовательно, обучающихся на очной и очно-заочной
тем лучше условия в вузе. формах программ бакалавриата,
специалитета, магистратуры
и программ подготовки кадров высшей
квалификации (ISCED-2011 Levels 6–8)
и приводилась к эквиваленту полной
нагрузки (full-time equivalent).
3Методология московского международного рейтинга вузов
«Три миссии университета», 2021 год
критерия, %
Смысл критерия
Наименование Источник
Вес
№ Что измеряется и обоснование его Особенности учёта
критерия данных
использования
II. Группа критериев «Наука»
5 Количество Выдающиеся 7 Предлагаемая метрика является Веб-сайты Определялось взвешенное количество
научных премий научные развитием подхода, предложенного международных премий из списка IREG List of Interna-
из списка IREG достижения шанхайским рейтингом. премий tional Academic Awards, полученных
у НПР Фундаментально идея подсчёта сотрудниками и выпускниками
и выпускников количества лауреатов престижных университетов в период с 2000 г.
университета премий для оценки научного по 2020 г. Учитывались только
потенциала вуза верна. Однако сотрудники, находившиеся в штате вуза
учёт только Нобелевских премий на момент вручения награды. В качестве
и Филдсовской премии сильно выпускников учитывались лица, успешно
ограничивает возможности для оценки прошедшие обучение в бакалавриате,
вуза. Поэтому при составлении рейтинга магистратуре и аспирантуре вуза
используется список IREG List of Inter- (и на программах, эквивалентных
national Academic Awards, в котором перечисленным).
учтено 99 наиболее престижных
в мире научных наград (с возможным
расширением списка учитываемых
премий в дальнейшем).
6 Средняя Качество 10 Нормализованная цитируемость Web of Science Учитывались публикации за 2016–2019 гг.
нормализованная научных количественно показывает, насколько Core Collection Расчёт нормализованной цитируемости
цитируемость публикаций лучше или хуже, чем в среднем в мире, осуществлялся отдельно
(глобальный (международный цитируется конкретная публикация по 6 укрупнённым областям знаний
уровень) уровень) по сравнению с работами того же согласно классификации ОЭСР
типа, той же области знания и года (естественные науки, инженерные
публикации. Индикатор показывает, и технические науки, медицинские
насколько научно-исследовательская науки, сельскохозяйственные науки,
деятельность вуза востребована общественные науки, гуманитарные
глобальным научным сообществом, науки). После этого полученные
отражая её актуальность и качество. показатели по всем областям знаний
Показатели нормализованной суммировались.
цитируемости широко используются
при составлении академических
рейтингов.
7 Средняя Качество 3 Индикатор свидетельствует о том, Web of Science Учитывались публикации за 2016–2019 гг.
нормализованная научных насколько научно-исследовательская Core Collection Расчёт этого показателя отличается
цитируемость публикаций деятельность вуза востребована от расчёта показателя средней
(национальный (национальный научным сообществом страны нормализованной цитируемости на
уровень) уровень) расположения университета. глобальном уровне тем, что для каждой
Введение данного критерия в систему из 6 областей знания рассчитывалось
показателей позволяет лучше отношение средней нормализованной
учитывать достижения национальных цитируемости вуза к аналогичному
научных школ и точнее измерять показателю страны. Итоговый балл
результаты в гуманитарных областях. считался как отношение результата
вуза к лучшему результату среди
университетов страны расположения
вуза.
8 Отношение дохода Вовлечённость 5 Индикатор фактически показывает, Веб-сайты Учитывался объём средств,
от исследований сотрудников какой объём средств, привлечённых университетов привлечённых университетом на
к числу НПР в научные на исследования и разработки, и органов власти научные исследования и разработки.
исследования приходится на одного сотрудника. В эту сумму не входят иные
и разработки Чем больше объём привлечённых составляющие, такие как доход от
средств в расчёте на сотрудника, образовательной деятельности,
тем востребованнее научные инвестиций, коммерциализации
исследования университета. Для и т. п. В случае если страновая
университетов, собирающих или иная специфика не позволяет
данные по расходам, а не доходам, вычленять объём выручки от
предусмотрен расчёт показателя по исследований, используется показатель
расходам (бюджету)на НПР. исследовательского бюджета как
объёма потраченных на исследования
средств. Расчёт производился по
паритету покупательной способности,
определённому Всемирным банком
(в случае отсутствия — паритету
по данным ОЭСР). Численность
научно-педагогических работников
(профессорско-преподавательский
состав и научные работники)
рассчитывается с приведением к полной
ставке (full-time equivalent).
4Методология московского международного рейтинга вузов
«Три миссии университета», 2021 год
критерия, %
Смысл критерия
Наименование Источник
Вес
№ Что измеряется и обоснование его Особенности учёта
критерия данных
использования
III. Группа критериев «Университет и общество»
9 Количество Вклад вуза 6 Инновационный показатель, впервые Агрегатор Class Определялось количество массовых
массовых в доступное применённый в практике составления Central, открытых онлайн-курсов, размещенных
открытых онлайн- онлайн- глобальных академических рейтингов, онлайн- на платформах, учитываемых
курсов вуза образование измеряет активность вуза в области платформы агрегатором Class Central, а также на
развития массовых открытых онлайн- «Открытое платформах «Открытое образование»
курсов. На открытые онлайн-курсы образование», и icourse163.org, на момент сбора
сформировался чётко выраженный icourse163.org данных (май 2021 г.). При этом каждой
общественный запрос, и динамичное платформе присваивался вес в
развитие этого вида образовательной зависимости от общего количества
деятельности не подлежит сомнению. слушателей онлайн-курсов данной
Чем большее количество открытых платформы (максимальный вес 1,00
курсов размещено на глобальных имеют платформы Coursera, edX, Fu-
онлайн-платформах, тем шире tureLearn, «Открытое образование» и
знание, передаваемое университетом icourse163.org). Полученные взвешенные
посредством интернет-технологий, значения суммировались.
и тем весомее его вклад в доступность
образования во всём мире.
10 Доля вуза Вклад вуза 4 Инновационный критерий рейтинга, Web of Science Отношение количества публикаций
в общем объёме в развитие измеряющий национальную Core Collection вуза за четыре календарных года
публикаций по научных значимость университетов для развития (2016–2019 гг.), индексированных
стране исследований в науки в своих странах. Чем выше доля базой Web of Science Core Collection,
стране публикаций вуза в общем количестве к количеству публикаций страны
публикаций страны, тем выше доля расположения университета. Итоговый
такого вуза в объёме проводимых в балл считался как отношение результата
стране исследований, следовательно, вуза к лучшему результату среди
тем значимее и ценнее такой вуз для университетов страны расположения
социума. вуза.
11 Общее количество Присутствие 3 Показатель отражает ряд важнейших Поисковые Количество проиндексированных
страниц веб-сайта в Интернете составляющих качества взаимодействия системы Google, поисковыми системами веб-страниц
университета, вуза с обществом: открытость Baidu, «Яндекс» на официальных доменах вузов
индексированных и прозрачность, доступность определялось при помощи стандартных
ведущими информации, стремление вуза к синтаксических операторов поиска по
поисковыми информационному обмену. домену поисковых систем Google, Baidu,
системами «Яндекс». После замеров в течение
апреля и мая 2021 г. было определено
минимальное значение индекса
согласно каждому из инструментов.
В итоговый зачёт вуза шёл наивысший
результат среди измерений тремя
поисковыми системами.
12 Количество Популярность 1 Наряду с официальным веб-сайтом Википедия Суммарное количество просмотров
просмотров в Интернете университета Википедия является страниц вуза в Википедии на английском
страницы вуза в важным источником информации. и (если применимо) на официальном
Википедии Большое количество просмотров национальном языке (языках) страны
страницы университета свидетельствует расположения вуза в 2020 году.
о его влиянии на общество.
13 Количество Коммуникации 3 Социальные сети являются одним из Facebook, Twitter, Анализировалось количество
подписчиков в соцсетях наиболее оперативных инструментов VK, Sina Weibo подписчиков страницы вуза в четырёх
аккаунта коммуникации между университетом социальных сетях — Facebook, VK, Twitter,
университета и кругом заинтересованных лиц; Sina Weibo. Рассматривались страницы
в социальных значительное число университетов на английском языке и на национальных
сетях использует соцсети для языках (если применимо). В итоговый
информирования общественности зачёт вуза шла сумма численности
о своей деятельности. Популярность подписчиков в двух социальных сетях,
разных социальных сетей различается где университет имеет наибольшую
в зависимости от страны и вуза, аудиторию.
поэтому для каждого университета
были собраны данные о подписчиках в
четырёх социальных сетях.
14 Количество Влияние 7 Качественное образование Википедия Суммарное количество выпускников
выпускников выпускников складывается во многом из университета, имеющих
вуза, которым на общество несоизмеримых явлений, в том числе персональную страницу в Википедии,
посвящена определяется степенью влияния удовлетворяющую пороговым
отдельная университета на общество. Один из значениям:
страница в наиболее эффективных способов такого по году рождения выпускника —
Википедии измерения – посчитать количество не ранее 1950 года, по количеству
успешных в различных сферах просмотров страницы — не менее 1000
деятельности выпускников (в политике, за 2020 г. Таким образом, страницы
науке, творчестве, искусстве, бизнесе, выпускников, не востребованные
благотворительности), которым в пользователями, не учитываются при
Википедии посвящена отдельная статья. расчётах.
Индикатор количественно оценивает
уровень воздействия вуза на общество.
5Методология московского международного рейтинга вузов
«Три миссии университета», 2021 год
критерия, %
Смысл критерия
Наименование Источник
Вес
№ Что измеряется и обоснование его Особенности учёта
критерия данных
использования
15 Размер интернет- Востребо- 4 Показатель отражает Alexa Оценивается доля посетителей сайта
аудитории сайта ванность востребованность официального университета от всех интернет-
вуза обществом интернет-сайта пользователями пользователей. Используются данные
по всему миру. Чем выше доля компании Alexa (сайт alexa.com), одного
пользователей интернета, из мировых лидеров в области веб-
посещающих сайт вуза, тем аналитики, замеры произведены в мае
популярнее университет. 2021 года.
Университеты, сайты которых
посещает большое количество
интернет-пользователей, высоко
востребованы в обществе
и ценны для социума.
16 Транспарентность Информационная 2 Индикатор комплексно оценивает Веб-сайты Индикатор учитывает наличие на
открытость политику вуза в области университетов официальном сайте вузов следующих
и качество информационной открытости ресурсов, материалов и публикаций:
информационной обществу, актуальный общий годовой отчёт,
политики её последовательность, а также актуальный финансовый отчёт, портал
поощрение вузом горизонтальных для выпускников, открытый перечень
связей. либо система поиска сотрудников,
миссия университета.
* — перечень учитываемых студенческих олимпиад:
• ACM International Collegiate Programming Contest
• Belgrade Business International Case Competition
• Green Brain of the Year Contest
• International Mathematics Competition for University Students
• John Molson Undergraduate Case Competition
• McGill Management International Case Competition
• Network of International Business Schools Worldwide Case & Business Plan Competitions
• NSUCRYPTO
• SCORE Software Engineering Contest
• The Annual Willem C. Vis International Commercial Arbitration Moot
• The Mathematical Contest in Modeling
• The Philip C. Jessup International Law Moot Court Competition
• The SIAM Award in the Mathematical Contest in Modeling
• The University Physics Competition
• The World Universities Debating Championships
• Global Investment Banking Valuation Olympiad
• LafargeHolcim Awards
6Вы также можете почитать
