Формирование системы мониторинга эффективности деятельности учреждений высшего профессионального образования Российской Федерации, в том числе входящих в образовательные кластеры Результаты НИР по Государственному контракту от 15 ноября 2012 г. № 05.N11.12.0003 Исполнитель: Национальный государственный университет «Высшая школа экономики» Актуальность проекта Актуальность проекта – способствует реализации задачи, сформулированной в подпункте а) пункта 1 Указа Президента Российской Федерации «О мерах по реализации государственной политики в области образования и науки» от 7 мая 2012 года № 599: проведение до конца декабря 2012 г. мониторинга деятельности государственных образовательных учреждений в целях оценки эффективности их работы, реорганизации неэффективных государственных образовательных учреждений, предусмотрев при реорганизации таких учреждений обеспечение права обучающихся на завершение обучения в других государственных образовательных учреждениях 2 Цель проекта Цель проекта – научно-методологическое обеспечение системы мониторинга эффективности деятельности учреждений высшего профессионального образования 3 для повышения качества и оперативности процессов сбора и обработки статистических данных вузов и их филиалов для проведения экспертизы деятельности образовательных учреждений на основе анализа их данных для формирования методической основы автоматизации процессов сбора и обработки данных в ходе Мониторинга для принятия управленческих решений об оптимизации сети образовательных учреждений по результатам Мониторинга их деятельности Основные результаты проекта 4 Осуществлен анализ действующей нормативной правовой базы в сфере высшего профессионального образования Доработана методология и инструментарий проведения Мониторинга эффективности деятельности вузов и их филиалов Осуществлен анализ данных о деятельности вузов и их филиалов по итогам Мониторинга 2012 года Сформирована методология выделения вузов и филиалов вузов группы риска Разработаны карточки вуза и филиала вуза, включенных в группу риска Раздел 1.1 Анализ нормативной правовой базы, методик и механизмов оценки деятельности учреждений высшего профессионального образования, в том числе входящих в образовательные кластеры Выполненные работы Полученные результаты Поиск, систематизация и анализ законов, указов, постановлений и методических документов, регулирующих напрямую или влияющих на процедуры оценки деятельности учреждений высшего профессионального образования Анализ нормативной базы осуществления лицензирования учреждений высшего профессионального образования и лицензионного контроля Анализ нормативной базы осуществления государственной аккредитации учреждений высшего профессионального образования Анализ нормативной базы осуществления государственного контроля (надзора) в области высшего образования Выявлены положения нормативно-правовых актов, напрямую регулирующие процедуры оценки деятельности вузов и положения нормативноправовых актов, влияющие на процедуры оценки деятельности вузов Охарактеризованы действующие процедуры оценки деятельности учреждений высшего профессионального образования в рамках контрольно-надзорных функций в сфере высшего профессионального образования Резюме Мера эффективности деятельности образовательного учреждения, определение динамики его развития в процедурах оценки деятельности учреждений высшего профессионального образования не оценивается либо, по крайней мере, не имеет юридического значения. В этой связи данные процедуры не могут подменить управленческий контроль, содержательную оценку эффективности функционирования образовательного учреждения высшего профессионального образования. 5 Раздел 1.2 Анализ материалов государственной статистической отчетности, баз данных Минобрнауки России и Рособрнадзора Выполненные работы Полученные результаты Анализ 6 форм Федерального государственного статистического наблюдения Анализ модуля сбора данных для вузов Анализ формы отчета по договору финансировании программы развития НИУ Анализ формы отчета по исполнению мероприятий, предусмотренных программой развития Федерального университета Анализ формы Мониторинга деятельности вуза Анализ формы Мониторинга деятельности образовательного учреждения высшего профессионального образования в сфере исследований и разработок и кооперации с организациями предпринимательского сектора о Представлены выводы о полноте собираемой статистической информации и о зонах пересечения (дублирования) сбора данных в рамках действующих форм статистической отчетности и проводимых мониторингов деятельности вузов Резюме Обоснована высокая степень детализации статических данных, представляемых вузами в рамках внешней отчетности. Выявлены зоны пересечения (дублирования) сбора данных в рамках действующих форм внешней отчетности, от которых целесообразно отказаться: например, ежегодный Модуль сбора данных для вуза во многом дублирует форму № 1-Мониторинг и другие формы отчетности. 6 Раздел 1.3 Анализ методик российских и международных рейтингов вузов Выполненные работы Полученные результаты Анализ методик 3 международных рейтингов вузов: o QS World University Rankings o The Times Higher Education World University Rankings, o Academic Ranking of World Universities Анализ методики нового российского рейтинга вузов «Рейтинг вузов России «Эксперт РА/РейтОР» Анализ публикаций ведущих экспертов о методиках, используемых в области рейтингования вузов Резюме Получены выводы о соответствии статистических данных, собираемых в ходе Мониторинга эффективности деятельности вузов и их филиалов, критериям рассмотренных рейтингов вузов Охарактеризованы сильные и слабые стороны критериев оценки рассмотренных рейтингов Получены выводы о релевантности/полноте набора критериев в утвержденном Перечне показателей оценки эффективности деятельности вузов Статистические данные, собираемые в ходе Мониторинга и содержащиеся в форме № 1-Мониторинг, позволяют произвести расчет большинства количественных показателей рассмотренных рейтингов, что расширяет возможности использования результатов Мониторинга. Часть количественных показателей рейтингов не отражена в Перечне показателей оценки эффективности деятельности вузов и их филиалов, что обусловлено разными целями мониторинга эффективности деятельности вузов и систем ранжирования вузов. Отмечена значимость качественных показателей деятельности вузов, которые не учитываются в форме № 1Мониторинг, но играют существенную роль при оценке эффективности деятельности вузов. 7 Раздел 2.1 Доработка утвержденной Минобрнауки России формы мониторинга по основным направлениям деятельности вузов и их филиалов на основе утвержденного набора показателей оценки эффективности их деятельности Выполненные работы Полученные результаты Анализ утвержденной Минобрнауки России формы мониторинга по основным направлениям деятельности вузов и их филиалов; Доработка разделов данной формы с учетом: проведенного мониторинга по направлениям деятельности вузов требований статистической отчетности Российской Федерации набора показателей оценки эффективности деятельности вузов и их филиалов форм сбора данных государственной статистики Российской Федерации о деятельности вузов вопросов сотрудников вузов, заданных в ходе мониторинга основным Доработаны и согласованы с Заказчиком формы мониторинга по основным направлениям деятельности вузов и по основным направлениям деятельности их филиалов: объем доработки составил 12% Резюме Доработанные формы способствуют повышению оперативности и качества сбора статистической информации о деятельности вузов и их филиалов в рамках Мониторинга 8 Раздел 2.2 Разработка методических рекомендаций по заполнению формы для сбора статистических данных о деятельности вузов и их филиалов на основе утвержденного Минобрнауки России набора показателей оценки эффективности их деятельности Выполненные работы Полученные результаты Разработаны методические рекомендации по заполнению форм для сбора статистических данных о деятельности вузов и их филиалов Определена структура рекомендаций методических Даны определения основных терминов и сокращений, используемых для сбора статистических данных у вузов и их филиалов Разработан алгоритм заполнения формы для сбора статистических данных о деятельности вузов и их филиалов Даны поясняющие комментарии о запрашиваемых в форме статистических данных Резюме В методических рекомендациях учтены замечания участников Мониторинга 2012 года. Методические рекомендации позволяют оптимизировать и повысить качество сбора информации, предоставляемой вузами. 9 Раздел 2.3 Разработка инструкции по расчету показателей оценки эффективности деятельности вузов на основе доработанной формы Выполненные работы Полученные результаты Разработана инструкция по расчету показателей оценки эффективности деятельности вузов на основе: утвержденных показателей эффективности деятельности вузов оценки анализа вопросов вузов, задаваемых в ходе заполнения формы мониторинга по направлениям деятельности вузов и их филиалов с учетом соответствия утвержденных показателей оценки эффективности деятельности вузов структуре данных доработанной формы сбора статистических данных о деятельности вузов и их филиалов В инструкции представлены формулы расчета всех показателей оценки эффективности деятельности вузов с указанием соответствующих разделов, строк и граф формы № 1-Мониторинг Резюме Инструкция позволяет обеспечивать автоматизацию расчета показателей оценки эффективности деятельности вузов. 10 Раздел 3.1 Разработка методологии выделения государственных вузов и филиалов группы риска для последующего экспертного анализа, включая оценочные шкалы, корректирующие коэффициенты, интегральные показатели для проведения оценки Выполненные работы Полученные результаты Проведен анализ показателей по направлениям деятельности вузов и филиалов вузов Охарактеризована специфика вузов и филиалов вузов группы риска, на основании чего сформированы три методики формирования интегральных показателей для дифференциации как вузов, так и их филиалов Сформирована методология выделения группы риска вузов и их филиалов на основе ключевых интегральных показателей Разработаны методики выбора оценочных шкал интегральных показателей для проведения оценки направлений деятельности вузов и филиалов вузов с учетом целевых групп вузов и филиалов вузов группы риска Резюме Разработанный инструментарий позволяет выделения группы риска вузов и их филиалов. 11 обеспечить автоматизацию процесса Раздел 4.1 Анализ данных о деятельности вузов по итогам заполнения ими утвержденной Минобрнауки России формы мониторинга по направлениям деятельности вузов и их филиалов Выполненные работы На основе выбранных статистического анализа графики распределений и интегральных и отдельных оценки эффективности вузов вузов Полученные результаты методов построены диаграммы показателей и филиалов Произведен анализ первичных данных о деятельности вузов и их филиалов Осуществлен анализ интегральных показателей по направлениям деятельности вузов и филиалов вузов На основе данных о деятельности вузов по итогам заполнения ими формы мониторинга, предоставленных Заказчиком, сформированы аналитические материалы и данные для обобщения результатов анализа Резюме По результатам проведенного анализа определены минимальные пороговые значения интегральных и отдельных показателей оценки эффективности для выделения вузов и филиалов вузов группы риска. 12 Раздел 5.1 Анализ и обобщение результатов Выполненные работы Полученные результаты Даны интерпретации результатов анализа данных мониторинга эффективности деятельности вузов и филиалов вузов Подготовлены описания схем выделения вузов и филиалов вузов группы риска Произведена оценка результатов проведенного в 2012 г. Мониторинга эффективности деятельности вузов и их филиалов, представлены интерпретации результатов анализа данных мониторинга эффективности деятельности вузов и филиалов вузов, подготовлены описания схем выделения вузов и филиалов вузов группы риска. Резюме Обобщение данных по результатам анализа позволяет оптимизировать процедуры сбора данных о деятельности вузов и критерии оценки их деятельности. 13 Раздел 5.2 Подготовка аналитических данных для последующего экспертного анализа деятельности вузов, в том числе входящих в образовательные кластеры Выполненные работы Полученные результаты На основе результатов мониторинга эффективности деятельности вузов и их филиалов определена структура карточки основных данных вуза, включенного в группу риска, а также структура карточки основных данных филиала, включенного в группу риска, разработан дизайн карточек и подготовлены рекомендации для их заполнения Разработаны структуры карточек данных вуза и филиала вуза, входящих в группу риска. Карточка предоставляет экспертам, анализирующим состояние образовательных учреждений, оказавшихся в группе риска, статистические данные обо всех основных направлениях их деятельности. Все значения, представленные в карточках, формируются на основе данных формы № 1Мониторинг. В структуре карточек представлены формулы расчета всех данных (с указанием соответствующих разделов, строк и граф формы № 1-Мониторинг), что обеспечивает автоматизацию процесса формирование карточек данных вуза и филиала вуза. Резюме Предложенные разработки оптимизируют механизмы сбора и обработки статистических данных о деятельности вузов и их филиалов, получаемые в ходе проведения мониторинга эффективности деятельности вузов и филиалов вузов, и могут быть внедрены в следующем календарном году. 14 Итоги проекта Оптимизация и повышение качества процедур сбора и анализа статистических данных, получаемых в рамках мониторинга эффективности деятельности учреждений высшего профессионального образования Методическая основа для автоматизации процедур проведения Мониторинга Возможность осуществлять типологизацию и дифференциацию образовательных учреждений высшего профессионального образования в соответствии с их образовательным и научным потенциалом Возможность принятия обоснованных управленческих решений по оптимизации сети федеральных образовательных учреждений и по формированию образовательных кластеров 15