Идея проекта "Разработка системы оценивания качества образования в Российских ВУЗах" (РЕЙТИНГ РОССИЙСКИХ ВУЗОВ - РРВ) Инициатор идеи проекта - Александр Костин, к.э.н., kostin@labrate.ru моб.+7(916) 105-81-04 Основные стейкхолдеры: ВУЗЫ, в т.ч. желающие войти в мировые рейтинги1 лучших университетов мира, родители, абитуриенты, студенты, преподаватели (ППС), эксперты НСКК АСИ, рейтинговые агентства, АККОРК, работодатели, кадровые агентства, агентства по оценке и развитию квалификаций НСКК, НФПК, руководители РОИВ и ФОИВ в сфере образования, международные университеты (в которых проводится обучение основам квалиметрии), IREG Observatory и др. Успешное использование методологии квалиметрии: 1) Одним из успешных примеров использования квалиметрического подхода при рейтинговании является Национальная премия в области франчайзинга «Золотой бренд» [3, c.121-143], подведение итогов в трех номинациях которой проводится с 2006 года по квалиметрической методике.; 2) в 2012 году в процессе создания АСИ НСКК2 наша идея3 проекта "Качество образования (Рейтинг ВУЗов)" была признана одной из лучших в краудсорсинг-проекте АСИ. Основная цель и задачи проекта Главной целью проекта является: 1. Создание надежных, масштабируемых и легко настраиваемых систем количественного оценивания качества образования (государственных услуг в сфере образования) в российских ВУЗах и разработка на их основе: ИТ-решений и обучающий семинаров. в Постановлении Правительства РФ от 25 апреля 2012 г. N 389 сообщается о трех основных рейтингах: академический рейтинг университетов мира (Academic Ranking of World Universities) - http://www.arwu.org, всемирный рейтинг университетов (QS World University Rankings) http://www.topuniversities.com/university-rankings и рейтинг университетов мира (The Times Higher Education World University Rankings) http://www.timeshighereducation.co.uk/world-university-rankings/ 1 2 http://www.asi.ru/news/4922/ 3 http://www.labrate.ru/kostin/executive_summary_02112012.ppt http://www.labrate.ru/kostin/061801.doc стр. 1 из 5 2. Разработка программного обеспечения, упрощающего4: 1) построение моделей оценивания качества образования ВУЗа согласно п.1 в виде планов; 2) построение моделей качества образования ВУЗа согласно п.1 в виде деревьев свойств; 3) сбор и хранение информации об объектах оценки (о российских вузах); 4) проведение оценивания качества образования в российских ВУЗах; 5) выполнение декомпозиции и композиции свойств оцениваемых объектов. 3. Построение моделей и "измерение" качества для каждой из групп пользователей (заинтересованных лиц): родителей (студентов и абитуриентов), руководителей РОИВ и ФОИВ в сфере образования, студентов, абитуриентов, работодателей, руководителей образовательного учреждения, преподавателей ВУЗов. 4. Повторное использование построенных моделей для сходных ситуаций оценивания. Создаваемые модели и программное обеспечение, должны обеспечивать прозрачность используемых методов, обоснованность выбираемых критериев (и их весов), их релевантность и валидность, а также ясность измерительных задач (что измеряем? с какой целью? и в чьих интересах?). В соответствие с главной целью проекта сформулированы основные ЗАДАЧИ : 1. Провести публичное обсуждение и анализ различных трактовок5 категории «качество образования» (возможно, с использованием краудсорсинга, возможно раздельно в академической и экспертной среде) и выработать согласованное мнение о том, что такое «качество высшего образования» и "интегральное качество высшего образования") как объект оценивания (и как процесс6, и как результат7, и как институт8). На основе консенсуальной договоренности о границах понятия «качество высшего образования» формализовать описание отдельных важных его составляющих свойств : "интегральное качество", "качество студента", "качество абитуриента", "качество ППС", "качество 4 минимизирующего издержки организатора (и участников) процесса оценивания качества 5 Качество образования - ряд системно-социальных свойств и характеристик, которые определяют соответствие (адекватность) системы образования принятым требованиям, социальным нормам, государственным образовательным стандартам. Качество образования - востребованность полученных знаний в конкретных условиях их применения для достижения конкретной цели и повышения качества жизни. Качество знаний определяется их фундаментальностью, глубиной и востребованностью в работе после окончания обучения. Под качеством образования понимается комплексная характеристика системы образования, отражающая степень соответствия реальных достигаемых образовательных результатов нормативным требованиям, социальным и личностным ожиданиям. 6 Образование — процесс развития и саморазвития личности, связанный с овладением социально значимым опытом человечества, воплощенным в знаниях, умениях, творческой деятельности и эмоционально-ценностном отношении к миру; необходимое условие деятельности личности и общества по сохранению и развитию материальной и духовной культуры. 7 Образование - по законодательству РФ - целенаправленный процесс воспитания и обучения в интересах человека, общества, государства, сопровождающийся констатацией достижения обучающимся гражданином установленных государством образовательных уровней (образовательных цензов). Уровень общего и специального образования обуславливается требованиями производства, состоянием науки, техники и культуры, а также общественными отношениями. 8 Образование - социальный институт, выполняющий функции подготовки и включения индивида в различные сферы жизнедеятельности общества, приобщения его к культуре данного общества. http://www.labrate.ru/kostin/061801.doc стр. 2 из 5 исследовательской деятельности", "качество международной деятельности", "качество учебных материалов", "качество образовательных процессов", "социальная мобильность выпускников" и др.); 2. Разработать структуры баз данных для хранения данных и метаданных о свойствах оцениваемых объектов для различных типов методов оценивания качества (точный, промежуточный, упрощенный) и эталонных значений показателей качества (или отдельных свойств) в системе образования; 3. Разработать типовые описания ситуаций оценивания и граничных условий модели для каждой группы пользователей. 4. Разработать программное обеспечение в соответствии с п.2. главной цели проекта 5. Разработать методику автоматизированного оценивания качества с помощью созданного в рамках проекта программного обеспечения и оформить ее в виде методических рекомендаций, предназначенные для использования в учебном процессе в рамках курса «Квалиметрия» в различных программах подготовки студентов (в т.ч. по специальностям 061100 - "Менеджмент организации", 657000 - "Управление качеством", 550200 "Автоматизация и управление"); 6. Разработать сценарий выступления российской делегации на международной конференции (например, в Польше9), подобрать исполнителей (ярких, зажигательных, свободно владеющих английским и разбирающихся в методике \предмете\ и могущих ответить на любые вопросы, которые могут быть заданы участниками IREG Forum on Ranking Methodologies по теме конференции) и подготовить яркое интерактивное выступление (удивить и предвосхитить ожидания и еще раз удивить, например, когда люди приедут домой, то увидят в своем почтовом ящике …), нацеленное на формирование у участников конференции мнения о том, что в России имеются (и работают) прозрачные, надежные и проверенные временем разработки в области количественного оценивания качества образования (деятельности ВУЗов), необходимые и достаточные для построения международного рейтинга ВУЗов, отвечающего Берлинским принципам ранжирования10. Для выступления и доклада целесообразно проанализировать возможность разработки компьютерного, аудио и видео оформления (сопровождение и поддержка, в т.ч. например, новые способы демонстрации и презентации11) выступления российской делегации на форуме (включая, например, мобильное приложение для всех видов смартфонов, которое бы позволило провести, в т.ч. интерактивное голосование по отбору экспертов и/или определению весов критериев деревьев свойств). 9 http://www.ireg-observatory.org/index.php?option=com_content&task=view&id=215&Itemid=181 10 http://www.ireg-observatory.org/index.php?option=com_content&task=view&id=59&Itemid=60 11 А чем удивлять будем помимо методики ? http://www.labrate.ru/kostin/061801.doc стр. 3 из 5 В качестве предложения к обсуждению: Качество – свойство, представляющее собой совокупность всех тех и только тех свойств, которые характеризуют получаемые при потреблении объекта результаты (как желательные, положительные, так и нежелательные, отрицательные), но которые не включают в себя затраты ресурсов на его создание и потребление. Качество высшего образования - комплексная характеристика процесса (или его результата) воспитания и обучения человека в системе высшей школы, представляющая собой совокупность всех тех и только тех свойств, которые характеризуют получаемые при этом результаты (как желательные, положительные, так и нежелательные, отрицательные), но которые не включают в себя затраты ресурсов (например, денежных средств) на его создание и применение. Качество выпускника вуза - комплексная воспитания человека в системе высшей школы, морально-этических свойств и знаний, умений специальности, но которая не включает в себя результатов. характеристика результата обучения и представляющая собой совокупность и навыков по полученной в вузе затраты ресурсов на получение этих Литература 1. Костин А.В. Рождение квалиметрии // Стандарты и качество. - М., 2010, №2. - С.90-91. 2. Азгальдов Г.Г. Разработка теоретических основ квалиметрии: Дис. на соиск. учён. степени д.э.н. / Военно-инж. акад. им. В.В. Куйбышева. - М., 1981 3. Квалиметрия: первоначальные сведения. Справочное пособие с примером для АНО 'Агентство стратегических инициатив по продвижению новых проектов': Учеб. пособие/ Г.Г. Азгальдов, А.В. Костин, В.В. Садовов. - М.: Высш. шк., 2011. - 143 с. 4. Дерево свойств "Качество образования в вузе (рейтинг вуза)" // Библиотека LABRATE.RU [Электронный ресурс]. URL: http://www.labrate.ru/kostin/quality-edu-tree.html (дата обращения: 29.04.2013). 5. Рейтинг вузов «Эксперт РА» - Методические подходы построения рейтинга вузов России http://www.raexpert.ru/rankings/vuz/method/ 6. IREG Observatory experts’ advice on the NTF project: Development and Approbation of a Template Methodology for National Rankings of Higher Education Institutions (экспертное заключение от 31.10.2012 по проекту «Разработка модельной методологии рейтингования российских вузов») // Библиотека LABRATE.RU [Электронный ресурс]. URL: http://www.labrate.ru/20121120/ireg-expertsadvice.pdf (дата обращения: 29.04.2013). 7. Дерево и веса критериев "Рейтинга вузов России «Эксперт РА/РейтОР»" // Библиотека LABRATE.RU [Электронный ресурс]. URL: http://www.labrate.ru/kostin/expert-reitor-2012.htm (дата обращения: 29.04.2013). 8. Garry G. Azgaldov, Alexander V. Kostin. Applied Qualimetry: Its origins, errors and misconceptions // Benchmarking: An International Journal, Volume 18, Number 3, 2011, pp. 428444. - http://www.labrate.ru/articles/428-444_applied_qulimetry_azgaldov-kostin.pdf 9. Azgaldov G.G., Kostin A. V. (2012) Increasing the Validity of Results of a National/International Competition: A Case Study / Europe Middle East Africa Members' Meeting, Barcelona (Spain), 2628 January 2012. - http://www.labrate.ru/kostin/054548.pdf http://www.labrate.ru/kostin/061801.doc стр. 4 из 5 10. Квалиметрия для всех: Учеб. пособие / Г.Г. Азгальдов, А.В. Костин, В.В. Садовов. - М.: ИнформЗнание, 2012. - 165 с. - http://www.labrate.ru/kostin/064571_qualimetry_azgaldovkostin-sadovov-2012.pdf 11. Азгальдов Г.Г. Квалиметрия в архитектурно-строительном проектировании — М.: Стройиздат, 1989. 264с. http://www.labrate.ru/azgaldov/qualimetry_in_architectural_and_structural_design.pdf 12. Тезисы Костина А.В. к заседанию круглого стола «Как и зачем измерять качество образования в вузе ?» (20 ноября 2012 года, ЦЭМИ РАН) // Библиотека LABRATE.RU [Электронный ресурс]. URL: http://www.labrate.ru/20121120/063804.doc (дата обращения: 29.04.2013). 13. Азгальдов Г.Г. Теория и практика оценки качества товаров. Основы квалиметрии. . - М.: Экономика, 1982. 256с. http://www.labrate.ru/azgaldov/azgaldov_theory_and_practice_of_quality-assessment.pdf http://www.labrate.ru/kostin/061801.doc стр. 5 из 5