Роль тестов в задаче повышения качества образования

Шадур Александр Львович, alshadur@mail.ru, ashadur@fa.ru
Финансовый университет при правительстве РФ, Москва
Роль тестов в задаче повышения качества образования
Статья подготовлена для круглого стола на тему
«Развитие тестовых технологий как фактор повышения качества образования» (Часть 2),
февраль 2012.
Организатор — Центр тестирования Финансового университета.
Основная идея статьи — автоматические системы тестирования
наиболее полезны при использовании в двух режимах — при самоподготовке
и при начальной оценке компетенций учащихся преподавателем.
В статье использованы многозначные понятия — качество, образование,
компетенции и т.п. Поэтому надо договориться об их содержании.
o Образование — процесс и результат приобретения компетенций
заданной области
в
финансов — учёт, управление и т.п. Математика,
информатика, история, философия и другие абстрактные дисциплины —
это только инструменты развития финансового образования.
o Компетенции — набор знаний, умений и навыков, необходимых для успешного решения задач в заданной области финансов.
o Технология (от греч. téchne — искусство, умение и …логия), система
способов получения информации, обработки и подготовки отчётов.
o Тестирование — человеко-машинная система оценки компетенций,
включая учителя, студента, автоматическую систему тестирования,
базу тестов, учебно-методическое обеспечение тестируемых дисциплин и
др.
Рассмотрим задачу статьи (семинара) с учётом этих понятий.
Основная задача подготовки бакалавра, магистра (любого специалиста
вообще) — повышение качества образования. Эта задача слишком сложна
для простого решения. Можно лишь создать предпосылки для её осмысления
и решения по частям. Возьмём две её части — общая задача (оценка качества
1
социальных объектов) и две частные задачи (оценка качества технологии
тестирования и учебно-методического обеспечения учебных дисциплин).
Оценка качества социальных явлений
Очевидно, что образование — сложное многозначное понятие. Поэтому
его трудно оценить одним показателем. Тем более что само понятие
показателя тоже многозначно. Самое простое определение (показатель — это
число) приводится в словаре Л.И. Лопатникова и трудах маститых учёных
М.А. Королёва и Е.Г. Ясина. Это слишком грубая модель. Показатель может
иметь любой тип данных. Например, в планах построения коммунизма в
СССР была указана дата — 80-е годы ХХ-го века. Здесь возникает ряд
вопросов.
 Какова точность числового показателя? Очевидно, что она зависит от
уровня требований учителя, обстановки в вузе, стране и т.п. Система
автотестирования в этом случае не поможет. Во-первых, она отражает
точку зрения и компетенции учителя. Во-вторых, как известно, есть много
способов добиться нужной оценки.
По свидетельству студентов нашего университета, обучавшихся в США
числовые оценки образования не объективны и за рубежом.
 Что отражает числовой показатель? — Умение проходить аттестацию
или уровень образования? Космонавт М. Сураев озвучил причину
падения
космических
кораблей.
Оказывается,
план
выпуска
ракетоносителей был удвоен без увязки с мощностью производства.
Нужен ли высокий уровень образования, чтобы понять, что удвоение
производства требует серьёзной подготовки? Возможно, дело не в
образовании, а в неумении отказать начальнику, в желании ему угодить и
т.п.
Таким образом, число — это слишком грубая оценка образования. Тем
не менее, его уровень оценивают числами. Рассмотрим определения
показателя других авторов.
2
В
учебнике
Э.М. Короткова
показатель
рассматривается
как
характеристика явления. Иначе говоря, показатель может быть любого типа.
В большом словаре по социологии отмечают две формы показателя —
качественную
(фиксирует
наличие
или
отсутствие
свойства)
и
количественную. А также рассматривают его как инструмент эмпирической
проверки теории. Это слишком слабый инструмент. Как, например,
проверить форму связи спроса-предложения, если неконтролируемое
изменение исходных данных влияет не только на константы, но и на форму
этой связи? В частности при росте цены спрос тоже может расти.
Кроме того, качественный показатель здесь определяется как двоичная
переменная. А это слишком сильное упрощение. Значений у такой
переменной (например, уровень образования) обычно гораздо больше. Но их
сложно оценить количественно. Такие показатели создают как нечёткие
переменные Л. Заде
— большой/маленький, больше/меньше средней
величины и т.д. Если значения не ранжируются, их сначала сравнивают
попарно.
Таким образом, надёжной оценки качества образования не существует.
Повысить её качество можно путём усреднения как можно большего числа
отдельных оценок. Поскольку оценка качества относительна, не надо
кошмарить (Д.А. Медведев) учащихся. Надо дать им шанс повысить
качество образования в режиме самотестирования/самоконтроля.
Очевидно, что качество образования зависит от многих факторов
(технология тестирования, учебно-методическое обеспечение), результаты
влияния которых так же трудно оценить и отделить друг от друга.
Качество технологии тестирования
Как известно, первые тесты были разработаны во Франции для оценки
уровня интеллекта детей с задержкой в развитии (см. мою статью для
предыдущего заседания круглого стола.). С тех пор принципы создания
тестов существенно не изменились. По-прежнему популярны тесты с
подсказкой (выбор из заданного набора). Однако, они не решают основную
3
задачу обучения — выявление и развитие творческих способностей. Ведь
реальные задачи не сводятся к выбору вариантов их решения (сначала их
надо выявить).
В силу сложности задачи тесты можно использовать только при
начальной оценке компетенций. Выяснить их фактический уровень можно
только непосредственно в контакте с учащимся. Гораздо более полезны
тесты при использовании их в режиме самоподготовки и самоконтроля.
Качество учебно-методического обеспечения предметной области
Тесты обычно разрабатывает автор учебных материалов. Поэтому тесты
часто определяют не компетенции учащихся, а их соответствие уровню
знаний автора тестов. Например, академик В.В. Васильев, проверив
популярные тесты интеллекта (IQ) Айзенка, показал, что многие тесты IQ
ошибочны. Таким образом, при создании тестов (и любых других учебных
материалов) следует ориентироваться на общепризнанные международные
стандарты, например в области финансов на учебники Ю. Бригхема.
Поскольку сейчас информационный век, необходимо следующее.
 Усилить информатизацию системы образования. Информатизация — это
не только возможность, но и необходимость применения в учебном
процессе реальных экономических показателей. Кстати их можно
получить
из
информационно-аналитических
баз
данных
нашей
библиотеки.
 Преподавать экономические дисциплины в программной среде, например
Excel. Ясно, что усвоить сложные понятия гораздо проще на числовых
примерах, решаемых в программах, освоенных ещё в школе.
 Изучать базовые дисциплины синхронно с информатикой (см. таблицу).
Её изучают на первом курсе (студенты не знают экономики). Когда
студенты начнут разбираться в экономике, они забывают информатику.
 Повысить качество учебников в соответствии с уровнем мировых
стандартов. Например, учебники по информатике должны описывать в
4
первую очередь не возможности компьютерных программ, а технологию
решения реальных экономических задач в среде этих программ.
 Создать учебник по информатике по финансовой схеме — учёт,
оптимизация налогов, управление финансами, актуарные расчёты и др.
Таблица 1 — Перечень дисциплин по выбору для бакалавра
Курс
1
1
2
2
Информационная дисциплина
Базовая
Состояние
дисциплина
работ
Средства коллективной работы и за-
Подготовлен
щиты данных в MS Office/интернет
проект
Средства поиска и анализа правовой Введение в
Подготовлен
информации в среде
специальность проект
Технология бухгалтерского учёта и
Бухгалтерский Программа
анализ в среде MS Office/интернет
учёт и анализ
внедрена
Технология финансовых
Основы
Подготовлен
вычислений в среде MS
финансовых
проект
Office/интернет/ СПС Консультант,
вычислений
программы
Гарант, Кодекс
3
Технология финансового учёта и
Бухгалтерский Программа
планирования в среде MS Office/
финансовый
в стадии
интернет /СПС Консультант,
учёт
подготовки
Гарант
3
4
Технология статистического учёта и
анализа в MS Office/интернет/СПС
Статистика
В стадии
подготовки
Технология налогового учёта и
Программа
оптимизации налогов в MS Office/
в стадии
интернет/СПС Консультант
подготовки
Технология управленческого учёта и Бухгалтерский Программа
4
анализа в среде MS Office/интернет/
управленчески в стадии
СПС Консультант, Гарант, Кодекс
й учёт
подготовки
5
Курс
Базовая
Состояние
дисциплина
работ
Анализ
Программа
деятельности в MS Office/интернет/
хозяйственной
в стадии
СПС Консультант, Гарант, Кодекс
деятельности
подготовки
Информационная дисциплина
Средства анализа хозяйственной
4
6