Экспертиза - это оценка объектов-вещей и объектов

УДК 005.519.6
ЭКСПЕРТНЫЙ МЕТОД В ОЦЕНКЕ ИННОВАЦИОННЫХ
ОБРАЗОВАТЕЛЬНЫХ ПРОГРАММ
Шишкина Н.А.
Научный руководитель: к.п.н., доцент Достовалова Е.В.
Сибирский федеральный университет
Активное применение экспертного метода как специфической процедуры началось со
второй половины XX века, когда возникли достаточно сложные задачи, связанные с
осознанием непредсказуемости и неопределенности в развитии не линейных систем. Это
потребовало иных подходов к решению, прежде всего, социальных проблем в соответствии с
принципом «несовместимости» Л. А. Заде: высокая точность исследования не совместима с
большой сложностью объекта. Подобного рода задачи стали решаться с использованием
экспертного метода исследования.
Развитие экспертного метода шло от потребностей практики, появилось большое
число типов, классов и видов экспертиз и около 300 методов экспертных оценок.
Проведенное исследование определило, что рассматривая вопросы применения
экспертного метода в инновационной деятельности возможно в следующих случаях:
1)на основании известных законов невозможно предсказать поведение системы в
будущем;
2) невозможно провести экспериментальную проверку предполагаемого хода
процесса;
3) выявлены (или наличествуют) неопределенные факторы, которые не поддаются
контролю;
4) существуют многовариантные пути решения проблемы;
5) не достаточно информации, на основе которой принимается решение.
Именно эти случаи и характеризуют инновационную деятельность. Разнообразие
определений понятия экспертизы, неоднозначность толкования её сущностных характеристик
разными авторами (О.С. Анисимов, С.Г. Баронене, Г.А. Мкртчян, Е.А. Позаченюк, Г.Н.
Прозументова, С.С. Татарченкова, В.С. Черепанов, А.Н. Тубельский и др.), говорят о различии
в понимании её содержания, функций и места в системе образования.
Проводя анализ подходов к понятию «экспертный метод» мы установили, что в ряде
случаев основной упор делается на исследовательскую функцию, и она трактуется как
исследование какого-либо вопроса и его разрешение при помощи специалистов. Понятие
экспертного метода и экспертизы в рамках магистерской диссертации мы будем
отождествлять.
Под экспертизой, в общем виде, понимают исследование и разрешение при помощи
сведущих людей какого-либо вопроса, требующего специальных знаний.
Экспертиза - это оценка объектов-вещей и объектов-процессов компетентными
людьми (экспертами), необходимая для принятия обоснованных управленческих решений
и действий в ситуации неопределенности.
В современной зарубежной литературе термин экспертиза (evaluation) используется для
обозначения оценивания или оценки как вида прикладного исследования. Проблема экспертизы
в зарубежной педагогике понимается в как проблема оценивания качества образовательных
программ и инноваций, а также эффективности деятельности образовательных учреждений.
Нами выявлены существующие в зарубежной практике две точки зрения на
проведение оценки. Одна утверждает, что оценка должна лишь фиксировать выбранное
состояние объекта и потому никакие иные вмешательства эксперта в результаты оценки не
допустимы. Другая, более открытая, допускает использование рекомендаций, т.е. предложений
эксперта по совершенствованию существующего качества. (M. Skriven).
1
Оксфам (1995) раскрывает это понятие как; «Оценка - это определение значимости
и ценности конкретного направления работы или деятельности организации в целом. Ее
главная задача - помочь организации задуматься над тем, чем она занимается, оценить, на
сколько успешно она это делает, и наметить требуемые изменения».
Исследователи раскрывают виды оценок и этапы организации, на которых проводится
оценка (предварительная оценка, оценка в ходе деятельности (текущая), заключительная
оценка). При этом они уделяют внимание целям оценки, среди которых выделяют:
повышение качества осуществления программ и проектов, повышение прозрачности
деятельности образовательных организаций, совершенствование навыков участников в
самооценке и внутренней оценке организации.
Инновация считается эффективной, (Халлам X., 1998) если благодаря ей происходят
положительные изменения в личности, в деятельности организации, возникают новые
результаты, новые цели и формируется потребность следующего этапа обучения, развития,
роста. Таким образом, оценка является обязательным этапом жизни развивающейся системы.
Без оценки не может быть никакого развития, неизбежен процесс самодовольства, если это
касается личности, и стагнации, если речь идет об организации.
Оценивание реализации инновационных образовательных программ (implementation
assessment) - еще одна важная стратегия. Целью является определение, в какой степени были
реализованы педагогическое воздействие или программа обучения. Зачастую отсутствие
данного оценивания не позволяет установить, была ли инновация реализована полностью, и если
нет, то в какой степени.
Рассматривая процесс проведения оценки зарубежными исследователями, можно
увидеть общее в подходе к экспертизе, осуществляемой в российской образовательной
практике.
Процесс
проведения
оценки,
как
отмечает
M.
Skriven
включает в себя:
1.Определение целей оценки
2. Постановка вопросов
3. Сбор информации для получения ответов
4. Анализ, размышление, вынесение суждений
5. Рекомендации на основе полученной информации (в виде письменного отчета).
Во всех подходах к понятию экспертизы, как в российской, так и зарубежной
практике выделяется то общее, что их или объединяет или позволяет рассматривать как не
противоречащие, а взаимодополняющие подходы к понятию: обязательное получение
информации, ее исследование (анализ), оценка, выработка предложений и возможных
путей по направлению развития в виде некого заключения, при наличии специальных знаний
у эксперта (привлеченного специалиста).
Согласно процедуре экспертизы по итогам экспертного исследования составляется
заключение - письменный документ, в котором фиксируются основания и условия
проведения экспертизы, поставленные на разрешение вопросы и объекты экспертизы,
описывается процесс экспертного исследования и установленные экспертом фактические
данные. Во многих экспертных заключениях итоговый документ является одним из видов
нормативно-правового акта (например, медицинской, судебной, трассологической, врачебной
экспертизах).
Важную роль в экспертном заключении играет интерпретация результатов
экспертизы. В целом интерпретация играет важную роль в теории познания, характеризуя
соотношение научных теорий и областей объективного мира. Отношение между реальными
объектами и их образами всегда приблизительное и неполное, может претендовать лишь на
гомоморфизм. Интерпретация носит, как правило, опосредованный характер и включает в
себя многоступенчатые, иерархические системы промежуточных интерпретаций. Связь
начального и конечного звеньев таких иерархий обеспечивается тем, что «интерпретация
2
интерпретаций дает непосредственную ее интерпретацию». Таким образом,
интерпретация есть инструмент научного моделирования. Проводя свои исследования в
рамках информационного подхода, Л.И. Фишман обращает особое внимание на специфику
измерений и сложность интерпретации информации, получаемой при изучении на том или
ином уровне социально-педагогических систем, к которым он относит образовательную
систему и ее результативно - деятельностное проявление - инновационную образовательную
практику.
Вин Р., Притш Дж., Скривин М. и ряд других исследователей отмечают, что каждое
качественное исследование уникально, таким же и является используемый аналитический
материал. "Кульминацией качественного исследования является скорее не полевая стадия, а
анализ, интерпретация и представление результатов заказчику. Проблема заключается в том,
чтобы в массе собранных материалов найти скрытый смысл и эффективно "свернуть" огромный
объем информации. К сожалению, как отмечают специалисты, бесспорных правил
качественного анализа данных, которые имели бы универсальное значение для получения
выводов и проверки их устойчивости и надежности не существует.
Таким образом, каждый эксперт должен уловить, то есть понять эту логику и вместе с
этим, «преобразовав», включить ее в свою логику, в свою систему сознания, что и является
ее интерпретацией. Субъективный подход, по оценке позволяет не сводить интерпретацию
к законам текстовой организации смысла, к законам его речевого выражения, к проблеме
адекватности понимания смысла, а раскрыть те системы отношений действительности, в
которые вступает инновация, интерпретируя эту действительность. Главным при этом
является не тождество этих знаний, точность информации и адекватность восприятия, а их
развитие, интеллектуальное преобразование экспертами, что и отражается в результатах
экспертизы.
Итак, содержанием экспертизы инновационной деятельности является сбор или
получение информации, ее исследование (изучение), анализ, понимание, интерпретация,
вынесение суждений (заключение). Еще одной задачей, решаемой в ходе определения
сущности экспертизы, является определение функций экспертизы инновационной
деятельности в образовании.
Говоря об инновационной деятельности в образовании, отметим, что экспертиза в
образовании является междисциплинарным многофункциональным диагностическим
методом изучения инновационных явлении и процессов с точки зрения обнаружения в
них потенциала развития.
Экспертиза, рассматривается как метод исследования, с помощью которого можно
осуществить прогноз, смоделировать ситуацию или процесс, осуществить проверку и
оценку. В.М. Полонский указывает на место экспертизы в образовании в качестве метода
наряду с экстраполяцией и другими методами. К такому видению места и функции экспертизы
присоединяется другие ученые, занимающиеся исследованиями в области педагогики,
указывая, что "экспертиза или экспертное оценивание — не что иное, как количественная
оценка качества, где основным методом является метод экспертной оценки. Тем самым,
экспертиза сводится к методу экспертных оценок.
Ряд авторов (Б.Г. Ананьев, Н.В Кузьмина, Б.В. Скаткин и др.), рассматривая экспертные
методы - описательные, оценочные, констатирующие в качестве методов педагогических
исследований (теоретических и прикладных), особое внимание уделяют интерпретационным
экспертным — генетическому и структурному, поскольку они позволяют решить задачу
описания изменяющегося социального объекта и прогнозирования его развития.
Экспертиза как результат оценивания и вынесения суждений, которые
представляются в виде заключения с развернутым ответом на основные задачи, которые
решались в ходе экспертизы. Например, в чем заключалась инновация, каков ее уровень,
3
каково необходимое ресурсное обеспечение, имеются либеральные возможности ее
реализации в практике и т.п.
Учитывая, что предметом нашего исследования является экспертиза инновационной
деятельности в образовании, проведем анализ работ российских и зарубежных
специалистов посвященных этому вопросу, для того чтобы составить полное понимание
дефиниции с учетом различных подходов.
Исследуя специфику экспертизы инноваций, многие авторы определяют её
важнейшую роль как механизма управления развитием образования, педагогической практики,
педагогической инициативы Г.Н. Прозументова конкретизирует такой подход следующим
образом; "экспертиза в образовании понимается как механизм проявления и поддержки
ненормы", "особых случаев педагогического прецедента", это "проявление различий
инициативных и типового образовательных пространств, механизм идентификации разного и
соорганизации в одном педагогическом пространстве". Через экспертизу необходимо
проявлять и устанавливать саму ситуацию неопределённости, обозначать её границы,
варианты преобразования, возможные индивидуальные пути развития, помогая становлению
авторских форм образования, помогая обнаруживать "разрывы" между авторскими замыслами
и реальным нормативным выполнением деятельности».
В ходе исследования было выявлено, что потребность в экспертизе возникает, если
исследованию подвергаются явления, которые не регламентированы нормативно-правовой
базой их деятельности, или выходящие за пределы согласованных и принятых
педагогическим сообществом положений, понятий, критериев.
Экспертиза становится средством, возможностью преобразования «неопределенности
новизны», социализации ее, вписывания в имеющуюся образовательную практику как
значимую. Особое место экспертизы заключается в определении и проявлении границ
определенности и неопределенности образовательной деятельности с целью различения и
обеспечения сосуществования различий в педагогической практике, выстраивания новой
идеологии, целей, форм деятельности в образовании. Экспертиза выступает в этом подходе
механизмом управления развитием образования, главным образом, за счет оформления
представления о новой деятельности, ее отличиях и значимости относительно прежней.
Различение обеспечивается осмыслением и построением адекватного представления автором,
инициирующим изменение и управляющим объектом за счет собственной рефлексивной по
отношению к деятельности позиции, в которой оформляется новая норма деятельности. При
этом автор и инициатор новой деятельности — вступая в «совместную деятельность» с
экспертом, вместе создают и социализируют новое образовательное пространство. Здесь же
значимо для нашего исследования то, что в экспертном взаимодействии выстраивается
совместная деятельность разных по позициям и "авторству" субъектов.
Раскрывая подходы к экспертизе инновационной деятельности, еще раз
подчеркнем, что «инновация - это конечный результат творческой деятельности,
получивший воплощение в виде новой или усовершенствованной продукции, реализуемой
на рынке, либо нового или усовершенствованного технологического процесса,
используемого в практической деятельности». Применительно к образованию инновация
означает введение нового в цели, содержание, методы и формы обучения и воспитания,
организацию совместной деятельности учителя и учащегося, управление, экономику.
Как и при проведении научного познания, исследования и при подготовке и
проведении оценивания, одним из основных вопросов экспертизы является вопрос
целеполагания, определения целей экспертизы. Целью экспертизы инновационной
деятельности
является
оценка
какого-либо
действия,
процесса, случившегося, текущего или который только предполагается, или
качества продукта по определенным показателям.
4