Презентация Бориса Илюхина

Региональная система
оценки качества
образования: цели,
структура, эффективность
Илюхин Борис Валентинович
Центр мониторинга и оценки качества образования
ТОИПКРО
bvi@ege.tomsk.ru
www.coko.tomsk.ru
Основополагающий документ
«Положение о региональной системе
оценки качества образования в
Томской области»
Утверждено Приказом Департамента общего
образования Томской области № 1447 от
26.11.2008 года.
http://edu.tomsk.gov.ru/kpmo/napravlen/rsoko.htm
Цель:
2.1. Целью формирования региональной
системы оценки качества в Томской области
является удовлетворение потребностей
субъектов образовательной деятельности
и потребителей образовательных услуг в
получении объективной информации о
результатах образовательной деятельности,
о состоянии и развитии системы общего
образования Томской области.
Потребители:
Потребителями информации, представляемой
функциональными структурами СОКО ТО, являются:
• - обучающиеся и их родители (законные
представители);
• - педагогические работники образовательных
учреждений и преподаватели вузов;
• - методические службы и система повышения
квалификации работников образования;
• - органы управления образованием;
• - работодатели;
• - средства массовой информации и другие
общественные институты.
Структура:
1.3. Основными элементами СОКО в Томской области
являются:
• критериально – нормативная база, включающая в
себя нормы, правила, регламенты, технологии и
средства мониторинга и оценки качества
образования;
• совокупность организационных структур, в том числе
специализированных учреждений, наделяемых
полномочиями по проведению мониторинга,
экспертизы и оценки качества образования;
• открытая структурированная система статистических
и аналитических данных о реально достигаемых
показателях качества образования.
Оценка качества образования
Оценка качества образования - это
объективная оценка:
• образовательных достижений обучающихся,
• оценка эффективности реализации
образовательного процесса в
образовательном
учреждении,
• оценка эффективности деятельности всей
образовательной системы страны и ее
территориальных подсистем.
© В.А. Болотов вице-президент РАО, академик РАО, д.п.н. «Программы оценки
учебных достижений» 22 ноября 2011 года, г. Москва
Понятийный аппарат
1.5. В данном Положении используются следующие
понятия:
• качество образования - интегральная
характеристика системы общего образования,
отражающая степень соответствия
образовательных программ, условий осуществления
образовательного процесса, реально достигаемых
образовательных результатов государственным
нормативным требованиям и требованиям
социального заказа, сформированного
потребителями образовательных услуг;
•
оценка качества образования – установление
степени (уровня) соответствия образовательных
результатов обучающихся, образовательных
программ, условий осуществления образовательного
процесса общепризнанным эталонам и требованиям,
зафиксированным в нормативных документах.
Эффективность:
Эффективные системы оценки качества
образования - это системы, которые
предоставляют информацию надлежащего
качества и в необходимом количестве
для
того,
чтобы
удовлетворить
информационные
потребности
всех
заинтересованных групп и тех, кто
принимает решения с целью повышения
качества обучения учащихся.
© В.А. Болотов вице-президент РАО, академик РАО, д.п.н.
«Программы оценки учебных достижений» 22 ноября 2011 года, г. Москва
Необходимые элементы
• Качественные измерительные материалы
• Технология сбора, обработки и хранения
данных
• Механизмы обеспечения достоверности
(доверия к результатам)
• Методики анализа полученной
информации
• Рекомендации и определение граничных
условий по использованию результатов
Измерительные материалы
• Внедрена технология разработки и комплексной
экспертизы измерительных материалов. Есть
единичные замечания к качеству ИМ. Планируется
введение межрегиональной экспертизы.
• Работают творческие группы по большинству
предметов – www.coko.tomsk.ru
• Созданы измерители (44 комплекта по 2 варианта),
не зависящие от учебников для входного и рубежного
контроля в 4-10 классах.
• Проводятся эксперименты по разработке и
внедрению оценочных мероприятий по определению
уровня сформированности ключевых компетенций
Основные недостатки реализации
мониторинга в школах России
• Выбор объектов мониторинга ПРОИЗВОЛЕН;
• Используется НЕ вся информация, НЕ
отражает всех достижений и проблем в
деятельности учреждения;
• НЕ установлены четкие сроки проведения
мониторинга (носит периодический характер);
• Часто НЕ ясна цель проводимых измерений и
нет потребности в получении информации;
• Информация собирается, но НЕ анализируется
Комплексный подход к проблеме качества современного образования
А.Б. Воронцов, кандидат педагогических наук, Открытый
институт «Развивающее образование», г.Москва
Технология сбора, обработки и
хранения данных
• Разработаны и внедрены технологии обработки
именных, неименных бланков ответов (ИС
Мониторинг)
• Создана технология сбора и обработки информации
для ИС Мониторинг аппаратными средствами
контроля «Тест-символ» (26626 человек в 2010/2011
уч. году)
• Разработана и внедрена в 100 образовательных
учреждениях региональная информационная
система мониторинга качества образования (ИС
«Портфолио») (17976 человек в 2010/2011 уч. году,
более 13 000 человек в 2011/2012 уч. году)
• Ведется активная работа по созданию и оптимизации
систем внутришкольного мониторинга
Технология сбора, обработки и
хранения данных
Риски:
– отсутствие генеральной линии;
– боязнь коллектива образовательного
учреждения независимой внешней
оценки;
– проблемы обеспечения корректности
процедуры проведения оценочных
мероприятий.
Механизмы обеспечения
достоверности
• ЕГЭ
• ГИА-9 в новой форме
• Региональный мониторинг
• Внешний независимый контроль
• Внутришкольные мониторинговые
исследования
• Внутриклассное формирующее оценивание
Результаты ЕГЭ и ГИА-9 2011 в Томской области
рус 11 рус 9
Муниципалитет
% "2"
рус 9
% "2" % "5"
мат 11 мат 9
% "2"
мат 9
% "2" % "5"
Г
0,9
14,7
10,0
8,8
17,3
12,0
город С
0,2
3,6
21,7
1,6
8,2
25,7
город Д
3,9
4,0
16,4
4,4
2,0
19,4
город B
1,2
7,7
20,6
5,2
13,9
22,6
ТОМ 1
1,5
11,4
19,2
2,6
13,5
15,5
город О
2,4
4,8
18,8
2,0
3,8
14,5
Ж
1,2
7,3
14,7
4,8
18,0
7,2
ТОМ 2
1,3
2,7
33,6
11,4
20,2
24,8
К
0,0
11,6
8,1
0,0
29,9
8,0
Л
0,3
1,6
22,7
5,5
0,8
23,9
М
0,0
23,1
6,0
0,0
8,2
12,7
Среднее по области:
1,4
7,4
18,7
4,5
11,4
19,9
Результаты мероприятий
математика 9-10 классы (муниципалитет)
100
региональные показатели
90
80
70
60
83,67
78,7
73,7
73,12
70,33
80,27
60,0
66,09
64,91
50
51,98
40
37,23
32,05
Повышенный
уровень
30
20
26,33
Базовый
уровень
23,61
10
0
мониторинг 2009- ГИА -9 2009-2010 мониторинг 2010- мониторинг 20102010 (9 классы)
2011 (10 классы) 2011 (10 классы)
осень
весна
Результаты мероприятий
математика 9-10 классы (Сельская СОШ)
100
региональные показатели
90
80
82,67
77,5
73,1
75,14
80,58
Базовый
уровень
80,27
70
61,32
66,09
60
64,91
Повышенный
уровень
49,33
50
42,58
51,98
40
30
26,33
20
23,61
10
0
мониторинг 20092010 (9 классы)
ГИА -9 2009-2010
мониторинг 20102011 (10 классы)
осень
мониторинг 20102011 (10 классы)
весна
Результаты мероприятий
100
90
математика 9-10 классы (Сельская СОШ №2)
96,8
региональные показатели
89,6
88,75
80
80,27
68,75
70
66,09
60
66,48
64,91
50
51,98
Базовый
уровень
40
Повышенный
уровень
31,94
30
25,94
23,86
26,33
20
23,61
10
0
мониторинг 2009-2010 (9
классы)
ГИА -9 2009-2010
мониторинг 2010-2011 (10
классы) осень
мониторинг 2010-2011 (10
классы) весна
Портфолио
пп.4.2. Основной формой комплексного учета
результатов оценки индивидуальных
достижений обучающихся является
«портфолио ученика». Порядок
формирования портфолио и его
использования для индивидуализации
образовательных программ, выявления и
поддержки одаренных детей, итоговой
аттестации выпускников устанавливается
локальными актами
образовательного учреждения.
Система оценки
• … Если мы хотим управлять качеством
а не говорить об управлении, то
необходим конкретный механизм
оценки…
© В.А. Болотов вице-президент РАО, академик РАО, д.п.н.
«Программы оценки учебных достижений» 22 ноября 2011 года, г. Москва
МЕЖДУНАРОДНЫЙ ОПЫТ
• В основе оценивания результатов
образования лежит не только определённая
норма, но и положительная динамика
изменений достижений (индивидуальный
прогресс, добавленная стоимость).
• Анализ результатов оценки учебных
достижений проводится с учётом факторов,
оказывающих влияние на эти результаты.
• Комбинация внутренней и внешней оценки–
базовый подход для оценки деятельности
школы.
© В.А. Болотов вице-президент РАО, академик РАО, д.п.н.
«Программы оценки учебных достижений» 22 ноября 2011 года, г. Москва
Системные риски
• крайне низкая степень культуры
педагогических измерений в
учительском и, зачастую,
управленческом сообществе;
• низкая степень информированности
общественности;
• отсутствие широкомасштабного
общественного участия.
Использование результатов
- Рейтинги?
- Распределение средств?
- Оценка РАБОТЫ учителя?
+ Формирующее оценивание;
+ Внутриклассное оценивание;
+ Корректирующие методики;
+ Оценка качества образовательных программ
Международный опыт
• Оценивание (assessment) это процесс сбора
и оценки информации о том, что учащийся
знает, понимает и умеет, он направлен на
принятие обоснованного решения, что делать
дальше в образовательном процессе.
• Система оценки представляет собой
сочетание политики, различных структур,
практик и инструментов, направленных на
получение и использование информации о
результатах обучения.
© В.А. Болотов вице-президент РАО, академик РАО, д.п.н.
«Программы оценки учебных достижений» 22 ноября 2011 года, г. Москва
МЕСТО СИСТЕМЫ ОЦЕНКИ КАЧЕСТВА
Свинья не прибавляет в весе от того,
что её часто взвешивают
Английская поговорка
Но если утверждается, что свинья прибавляет в весе,
то доказать это без взвешивания весьма
затруднительно
Из наблюдений животноводов
Система оценки необходима для обслуживания
системы образования, но не наоборот.
© В.А. Болотов вице-президент РАО, академик РАО, д.п.н.
«Программы оценки учебных достижений» 22 ноября 2011 года, г. Москва
Необходимые качественные шаги
• Просветительская деятельность в области
педагогических измерений
• Создание общественного органа по оценке качества
образования на уровне области
• Региональная программа информирования
общественности о процедурах и результатах
процедур оценки качества образования
• Расширение региональной программы
мониторинговых исследований.
• Сотрудничество с Федеральными площадками по
разработке инструментария оценки образовательных
достижений.
• Административный запрет на использование
результатов внутришкольных и иных мониторинговых
исследований в целях распределения
стимулирующих выплат.
Мы работаем для Вас!
Илюхин Борис Валентинович
Центр мониторинга и оценки качества
образования ТОИПКРО,
www.соко.tomsk.ru
тел. (3822) 426 327; +7 913 829 36 63
факс (3822) 426 331
bvi@ege.tomsk.ru; bvi@tusur.ru