Всероссийский семинар по вопросу формирования общероссийской системы оценки качества образования 30 октября 2013 года, г. Саратов Оценка учебно-предметных компетенций и индивидуального прогресса школьников Рябинина Л.А., зам. директора КГКСУ «Центр оценки качества образования», г. Красноярск Для чего оценивать? ОЦЕНКА - КОНТРОЛЬ ОЦЕНКА - ПОДДЕРЖКА (оценка для обучения, оценка для диалога и саморазвития) Нужны инструменты, позволяющие оценивать образовательные результаты школе, самим учителям по ходу образовательного процесса, открывая возможность вносить в него необходимые коррективы. Что оценивать ? Требования к результатам освоения основной образовательной программы начального общего образования: В итоговой оценке должны быть выделены две составляющие: результаты промежуточной аттестации обучающихся, отражающие динамику их индивидуальных образовательных достижений, продвижение в достижении планируемых результатов освоения основной образовательной программы начального общего образования; результаты итоговых работ, характеризующие уровень освоения обучающимися основных формируемых способов действий в отношении к опорной системе знаний, необходимых для обучения на следующей ступени общего образования. Что мы оцениваем, когда оцениваем предметные результаты? Предметные результаты, включающие освоенный обучающимися в ходе изучения учебного предмета опыт специфической для данной предметной области деятельности по получению нового знания, его преобразованию и применению, а также систему основополагающих элементов научного знания, лежащих в основе современной научной картины мира. Какие инструменты оценки нужны? Основание для разработки инструментария: психологическая модель учебного процесса, намеченная в теории культурного развития Л.С. Выготского и развёрнутая в трудах его последователей. Учение, как необходимая предпосылка психического развития ребенка, есть присвоение знаковых структур, в которых кристаллизованы культурные (обобщенные) способы действия. Предмет оценки: освоение обобщенных способов действия. Уровни освоения способов действия Функциональный Свободное действие – ориентация на поле возможностей способа действия Содержательно-рефлексивный Действие с пониманием – ориентация на существенное отношение, определяющее способ действия Формально-репродуктивный Действие по наличному образцу – ориентация на внешние его характеристики: правило, алгоритм Первый уровень – формально-репродуктивный Способность действовать, ориентируясь на внешние характеристики задачной ситуации и образца действия (действие по образцу, шаблону, алгоритму) Пример заданий по русскому языку (1-й уровень) Задание 1. Обведи номера слов, в которых нет приставки. 1) присесть 2) перелететь 3) облако 4) отбежать 5) дорога Второй уровень – содержательно-рефлексивный (предметный) • Способность действовать на основе содержательного анализа задачной ситуации, то есть выделения существенного отношения, определяющего принцип решения (действие «с пониманием» – на основе общего принципа) Пример заданий по русскому языку (2-й уровень) Задание 2. Отметь слова, в которых есть приставка. 1) сбежать 2) слеза 3) киносъёмка 4) сегодня 5) соперник Третий уровень – функциональный Предполагает свободное владение способом действия и применение его в разных контекстах Пример заданий по русскому языку (3-й уровень) Задание 3. К каким словам нужно добавить приставку за-, чтобы текст передавал смысл последнего предложения? Подчеркни эти слова. Я старался не спугнуть зверей. Но вот встревожилась ближайшая ко мне самочка. Она привстала и подняла острую рыжую мордочку, зашевелив усами. Оторвали от песка головы и её соседки. Возился огромный самец. И вдруг всё семейство, как по команде, двинулось к воде. Шевелились и другие звери. Качались, ныряли усатые чёрные головы. Пляж начал приходить в движение. SAM (School Achievement’s Monitoring) SAM - это тестовый инструмент оценки учебнопредметных компетенций, структура которого включает механизм диагностики качества усвоения предметного содержания (русский язык, математика). Профиль присвоения культурных образцов действия Функциональный Содержательный Формальный Пройденная часть учебной программы Виды грамотности и их оценка Предметная линия Способы действия Средства действия Математическая грамотность Измерение величин •прямое измерение •косвенное измерение отношение между числом, величиной и единицей отношение «часть и целое» формула площади прямоугольника Языковая грамотность Слово и его значение Построение рядов слов и словоформ с чередующими звуками Отношение «звук-буква» Звуковая модель слова Структура тестовых заданий Задание 1.1. Способ действия (задача) 1 уровень формальный Задание 1.2. 2 уровень предметный Задание 1.3. 3 уровень функциональный Структура теста Содержательная основа теста – технологическая матрица (система средств/способов ориентировки действия в данной предметной области) … Задача 1 Задача 2 Задача N Задание 1.1 Задание 2.1 Задание n.1 Задание 1.2 Задание 2.2 Задание n.2 Задание 1.3 Задание 2.3 Задание n.3 Предмет тестирования – мера присвоения культурных средств и соответствующих им способов действия Выделение субтестов Типы данных и форма их представления (SAM) Интегральный балл даёт количественную характеристику учебных результатов и позволяет напрямую сопоставлять и ранжировать достижения тестируемых индивидуумов или групп. Трехмерный профиль позволяет выдвигать гипотезы относительно качества образовательного результата. Ступени достижений: качественно-количественная характеристика Нулевая ступень: не освоен даже первый уровень. Учащиеся, находящиеся на этой ступени, выполняют менее 50% заданий 1-го уровня и практически не выполняют задания более высоких уровней. Первая ступень: освоен только первый уровень. Учащиеся, находящиеся на этой ступени, выполняют не менее 50% заданий 1-го уровня, небольшое количество заданий 2-го уровня и практически не справляются с 3-им. Вторая ступень: освоен второй уровень. Учащиеся, находящиеся на этой ступени, выполняют не менее 50% заданий 2-го уровня. При этом они легко справляются с 80% заданий 1-го уровня и делают некоторые задания 3-го уровня. Третья ступень: освоен третий уровень. Учащиеся, находящиеся на этом уровне, выполняют не менее 50% заданий 3-го уровня, легко справляются практически со всеми заданиями первого уровня и делают не менее 80 % заданий 2-го уровня. Профиль (Дельта и SAM) 100% 80% 60% 40% 20% 0% 1 2 3 Оценка образовательной ситуации Профили двух классов одной школы, получивших одинаковые интегральные баллы по математике 100 90 80 Решае 70 мость 60 (%) 50 Класс 4 в 40 30 Класс 4 г 20 10 0 1 уровень 2 уровень 3 уровень Результаты выполнения теста по математике для начальной школы 100 90 80 Реша емост 70 ь (%) 60 10 классы 50 8 классы 40 6 классы 30 4 классы 20 10 0 1 уровень 2 уровень 3 уровень Сравнение школ по ступеням достижений Дельта (от «среза» к картине развития) Дельта – инструмент для оценки индивидуального прогресса учебных действий ученика (русский язык, математика). Индивидуальный прогресс учащегося в освоении учебного предмета (его наличие и характер) определяется по результатам нескольких диагностических срезов. Задача первого среза – зафиксировать стартовую точку для определения индивидуального прогресса школьников в освоении учебных предметов. Задача второго и последующих срезов – определить характер изменений в уровне владения предметными средствами, произошедших с конкретным учеником за промежуток между срезами (уровневый прогресс и линейное приращение). Дать прогноз дельты. Основные показатели освоении предмета характера продвижения в Динамические характеристики По результатам каждых двух срезов могут быть получены ответы на следующие вопросы: какой уровень устойчиво демонстрирует на обоих срезах (актуальный уровень) и какой уровень находится в стадии освоения (осваиваемый уровень); каков характер продвижения ученика в овладении предметным средством, какой прирост произошел у данного конкретного ученика в освоении предметных действий(дельта); каков прогноз индивидуального прогресса, т.е. перехода учащегося на следующий уровень (прогноз дельты). Дельта Ф. И. ученика 1-й срез 2-й срез 3-й срез Дельта после 2го среза Дельта после 3-го среза Ученик 1 1 2 3 1->2 2->3 Ученик 2 2 3 3 2->3 Ученик 3 3 3 Ученик 4 2 2 3 2->3 Ученик 5 2 2 3 2->3 Ученик 6 2 3 3 Ученик 7 2 2 3 2->3 Ученик 8 1 1 2 1->2 Ученик 9 0 0 1 0->1 Ученик 10 2 3 2->3 2->3 Адресаты оценки индивидуального прогресса Учителя Родители Ученики Администрация школ Оценка образовательных результатов и качество образования Успешность решения задач улучшения качества образования во многом зависит от того, как устроена система оценки: •насколько она поддерживает и стимулирует учащихся; •насколько точную обратную связь она обеспечивает; •насколько включает учащихся в самостоятельную оценочную деятельность; •насколько она информативна для управления. Спасибо за внимание! Тел./факс: (391) 2-27-76-79 e-mail : cоko@kipk.ru сайт: cоk.cross-edu.ru «ЦЕНТР ОЦЕНКИ КАЧЕСТВА ОБРАЗОВАНИЯ»