17.11.2017

Внимательный анализ буквы российского закона об образовании позволяет увидеть, что и с его духом не всё в порядке. Что мы на самом деле имеем в виду, когда говорим о качестве образования? И как оценить его эффективность?

Министр образования Ольга Васильева подняла на новый уровень интенсивность дискуссии о советской школе:

• один полюс восхваляет советскую школу и мечтает отменить все реформы, лишь бы вернуться к её плодоносящим корням,
• другой называет мифами достижения советской школы и приводит в доказательство альтернативные аргументы.

Получается разговор слепого с глухим с постепенным укреплением каждого в собственном мнении. Разумеется, в строгом соответствии с научными данными о способности людей прислушиваться к логическим аргументам.

По сути, это та же дискуссия, которая ведётся о результатах образования, мониторинге образования, оценке качества образования. При полном уважении к её научному компоненту я бы хотел обратить внимание на управленческий аспект, потому что у любой научной модели есть условия воплощения и применения.

Именно применимость критериев и оценок объединяет две стремящиеся навстречу друг другу дискуссии наукометристов и бытометристов. Слова те и другие произносят одни, а смыслы подразумевают совсем разные. Если учёные иногда обозначают где-то в уголочке своей работы, что именно понимают под используемыми словами (хотя определения теряются в последующих дискуссиях), то в бытовых спорах об этом даже не думают. Для бытовых дискуссий характерны сопоставление разных критериев (а не результаты измерения) и диспут об их значимости. Строго говоря, это означает подспудную дискуссию о ценностях, а не о показателях.

Куда же без экзамена?

Экзамен, как любой измерительный инструмент, оценивает сам себя: это способность испытуемого решать задачи, которые представлены именно в этом конкретном экзаменационном листе. Экзамен может быть ориентирован на личностные измерения или на рейтингование – это зависит от подбора заданий.

Важное значение имеет система отношений при проведении экзамена, потому что она влияет на мотивацию всех его участников.

В классической модели образования, когда обучение напоминает обработку деталей на конвейере, экзамен напоминает военную приёмку серийной электроники: что в брак, что в ширпотреб, что на военку, что в космос. Экзамен является неизбежным финальным этапом «производства».

• Ученик на экзамене пребывает в стрессе и надежде на более высокий статус. Поскольку его волнует не истина, а «размер», можно «пойти во все тяжкие».
• Экзаменатор оказывается в двойственном положении: он и демиург для каждого испытуемого, и ответственный за эксцессы. Если он же и учитель испытуемых, что типично для экзаменов по традиционной советской схеме, то он же – и косвенно аттестуемый. Так что, как бы он гордо ни рассекал перед учениками, он тоже заинтересован в максимальном «размере», но совокупно, а не персонально (что не исключает частного интереса как такового).
• Администратор организации, проводящей экзамен, мечтает побыстрее от него избавиться с минимальными неприятностями. Честность экзамена и достоверность результатов для него не являются самостоятельной ценностью. Если экзаменуются «свои» ученики, он тоже заинтересован в максимально высоких «размерах». Если экзаменуются ученики другой школы, а свои – где-то ещё, то оба администратора хорошо понимают вероятную взаимозависимость отношений.

Таким образом, все участники традиционного итогового экзамена заинтересованы в максимальной величине оценки, а не в её объективности.

Доля честности результата экзамена сильно зависит от личностных качеств ответственных лиц, что в условиях циничных потребительских отношений является сомнительным барьером. Именно поэтому, если есть внешний заказ на честность, приходится мириться со всё более значительными издержками, которые работают только до того момента, пока к ним не найдут ключик.

Вступительные версии экзаменов обсуждать не очень интересно: даже самые упоённые любители традиционной схемы экзаменов хорошо помнят коррупционные скандалы и понимают их неизбежность. В качестве антитезы они приводят изменение схемы коррупции с вуза на пункты сдачи ЕГЭ или на скупку ответов. Некоторые вузы и в новых условиях находят лазейки для манипуляций в приёмных кампаниях. Достоверного подтверждения преимуществ одних форм экзаменов перед другими лично я не видел. Кроме творческих вузов, где отсутствие неформальных компетенций является очевидным препятствием к обучению.

Что оценивает ЕГЭ?

ЕГЭ – экзамен предметный, поэтому оценивает только предметные компетенции ученика, способность решать задачи по данному предмету. Никакие душещипательные истории про «он не учитывает» не имеют значения, потому что задача ЕГЭ даже не столько оценить, сколько ранжировать учеников по способности решать. Перед ЕГЭ две задачи:

• подтвердить освоение предмета на уровне, достаточном для выпуска из школы,
• пройти барьер конкурса в вуз.

Ни для первой, ни для второй не нужно оценивать в полном объёме освоенность программных требований – это банальные барьерные задачи. И нет никаких оснований обвинять ЕГЭ в неполноте решения задачи. Разве есть основание полагать прошлую схему локальных экзаменов более полно оценивающей? Если даже да, зачем ставить такую задачу? И кто должен заниматься этим?

Прошлая схема строилась под конкретную программу или даже под конкретного учителя. Это могло создать иллюзию «всесторонней оценки».

В реальности локальная оценка локального экзамена измеряла мнение локальной экзаменационной комиссии об испытуемом. С позиции ученика это только усложняло процесс сдачи экзамена, заставляя подстраиваться под уникальные локальные требования. Как в любом нестандартизированном процессе, кому-то это давало преимущества, кому-то – наоборот. В остальном – полная несопоставимость результатов и непрозрачность экзаменационного процесса со всеми вытекающими. Что полезного ученик вынес из обучения, определяется не экзаменом, о котором он на следующий день забудет, а процессом обучения и потребностями самого ученика.

Результаты ЕГЭ сводятся в различные рейтинги.

• Первый уровень – выявление пороговых значений для зачёта обучения в школе. Судя по неоднократным фактам снижения пороговых значений, задача выпуска из школы сегодня является формальной. И это правильно: возвращать в класс провального ученика, достигшего определённого возраста, никому не надо – это лишняя головная боль и для ученика, и для школы. Обе стороны в этом не заинтересованы.
• Второй уровень – выявление пороговых значений в каждом вузе для зачисления абитуриентов.
• Мониторинговый уровень – обобщающие рейтинги по учителям, школам, муниципалитетам и так далее.

К счастью, уже в прошлом время, когда обобщающие рейтинги использовались для «оценки качества образования»: ЕГЭ не имеет никакого отношения к качеству образования в понимании даже самих разработчиков ЕГЭ. Но наличие чисел не могло оставить чиновников равнодушными, пока их не приструнили на фоне громких скандалов с самой верхушки.

Что оценивают международные рейтинги?

Различные международные рейтинги ранжируют страны по обобщённым результатам решения определённых задач на базе национальных выборок испытуемых. Выборку стараются сделать презентативной и валидной. Насколько это удаётся, вопрос к специалистам по диагностике – претензий по неправильной выборке я в прессе не встречал.

Каждый из рейтингов ориентирован на свой круг задач, на выявление и анализ определённых способностей. Насколько подбор задач в данных рейтингах позволяет достигать заданных целей – вопрос к составителям.

Важно понимать, что ни один тест или рейтинг не может исчерпывающе оценить все аспекты образования.

Ценна совокупность рейтингов, чтобы понимать, как и какие задачи лучше или хуже решают испытуемые в разных странах. Это позволяет лучше ориентироваться в международных тенденциях образования.

Но только примитивные управленцы могут ставить задачи «подняться в международных рейтингах» без определения целей национальной системы образования. Есть известный c 70-х годов прошлого века принцип Гудхарта (Лукаса, Кемпбелла), который заставляет аккуратнее относиться к управляемым показателям, чтобы не превратить управление в профанацию:

Когда социальный или экономический показатель (KPI) становится целью для проведения социальной или экономической политики, он перестаёт быть достойным доверия показателем.

Рейтинги хороши для анализа, пока не являются предметом отчётности, пока представляют собой чистые неуправляемые показатели. Впрочем, даже наблюдение влияет на результаты, поскольку обращает внимание на особенности, которые без рейтингов могут оставаться вне зоны внимания. Раз обратил внимание, то неизбежно начал с выявленным аспектом работать.

Результат образования

Казалось бы, есть определение понятия «качество образования» в тезаурусе закона «Об образовании в РФ» (пункт 29 части 1 статьи 2):

…комплексная характеристика образовательной деятельности и подготовки обучающегося, выражающая степень их соответствия

федеральным государственным образовательным стандартам, образовательным стандартам, федеральным государственным требованиям

и (или) потребностям физического или юридического лица, в интересах которого осуществляется образовательная деятельность,

в том числе степень достижения планируемых результатов образовательной программы…

Тем не менее, многочисленные исследования и публикации предлагают другие трактовки этого словосочетания. Например, в одной из первых статей, выдаваемых по поиску в сети, Станкевича Е. Ю. «К вопросу оценки качества образования» (2013), на первой же странице предлагается целый спектр вариантов от разных авторов.

Определение в законе довольно ущербно, так как первая часть его определяется функцией государственной образовательной организации. Неисполнение этой функции влечёт административные последствия. Вторая часть органична для сферы дополнительного образования, которое удовлетворяет потребности юридических и физических лиц. Кроме того, определение в законе ограничивает оценку обучающимся.

Определение полезно в предложенном контексте разве что для использования в теле самого закона, где встречается восемь раз.

• Первой проблемой для меня является трактовка слова «образование», так как смыслов в нём много, вплоть до взаимоисключающих – все они представлены мной в отдельной подборке. Наиболее конфликтными смыслами «оценки качества образования» могут быть контексты «оценка качества системы образования» и «оценка образованности обученного». Причём в первом варианте много подвариантов, так как под системой могут пониматься разные уровни: от всей системы до конкретного преподавателя. Кроме того, в практике слово «образование» часто используется как синоним слова «обучение». Без уточнения разобраться со смыслами обоих словосочетаний невозможно.
• Второй проблемой вижу угол контроля: чей результат и для кого? Мы привыкли делать оценку качества из административной позиции, а сегодня становится актуальной контролирующая позиция самого обучаемого. Раз образовательная услуга уже декларирована в законе и откровенно востребована новой субъектностью современного ученика, стоит его контролирующие функции тоже принимать во внимание, даже если не каждый хочет и готов их использовать. Точкой интереса может быть также родитель или работодатель.
• Третьей проблемой мне кажется неравнозначность всех возможных комбинаций предмета оценки, чтобы так легко манипулировать многозначными словосочетаниями на все случаи жизни.

Полезнее исключить многозначные формулировки, несмотря на их популярность, в пользу более точных и конкретных описаний предмета оценки. Или использовать их исключительно в контексте закона, чтобы исключить другие варианты как неадекватные.

Для меня образование и обучение – не только не одно и то же, но и принципиально разные понятия с точки зрения субъекта оценки:

• обучение – процесс внешнего воздействия (учителя на ученика) для формирования обещанных компетенций
• образование – личностный процесс освоения компетенций, который может проходить в форме внешнего обучения (педагогом)

В обучении действующим субъектом является учитель, а в образовании – ученик. При этом обучение конкретно, а образование абстрактно (ничем и никак не ограничено и не измеримо).

Таким образом, в моей терминологии оценить качество образования невозможно в принципе – можно оценить некоторые конкретные компетенции, приобретённые в процессе образования.

А каким образом они приобретены – путём обучения, самообучения, размышления или открытия – это значения не имеет.

Что можно оценить?

«Результаты освоения основных образовательных программ», согласно пункту 3 части 3 статьи 11 закона «Об образовании в РФ», должны отвечать требованиям современных ФГОС. Из описанных в стандарте требований личностных, метапредметных и предметных результатов оцениванию подлежат только предметные. При этом конкретные «результаты освоения» по предметам определяются на основе образовательной программы организации, а не по ФГОС. Факт упоминания личностных и метапредметных результатов в стандарте формирует общеизвестный дискурс построения образовательных программ. И это очень хорошо. Но констатирует, по сути, сложность и неоднозначность задачи оценки этих результатов, выводя их, таким образом, из нашего обсуждения проблем формальной оценки результатов.

Важный современный дискурс – оценка компетенций. Но и тут не всё просто. Многие специалисты скептически относятся к диагностике компетенций и спорят об определении понятия. Вызывает путаницу близкое понятие компетентности. Я под компетенцией понимаю некоторые профессиональные качества, позволяющие человеку уверенно выполнять задания определённого типа. Владение компетенциями означает для меня полноценное умение в традиционно русском смысле этого слова. Протестировать его без риска запороть пробное задание не вижу возможности.

Умение решать задачи по сопромату – тоже компетенция, но из неё не следует компетенция по расчёту моста, например.

Компетентностный подход продвигает сферу образования в постановке задач перед системой, но и он обладает недостатками. В статье Владимира Никитина озвучен важный пассаж, который помог мне понять, что всегда угнетало меня в компетентностном подходе: «Идея компетенций – это идея фрагментации». Без целостности системы фрагменты живут сами по себе, не формируя целостно значимой сущности. Их прелесть – в гибкости выявления и добавления новых элементов мозаики в целостную картину образования. Модные рассуждения о «навыках XXI века» страдают этой фрагментарностью: их можно планировать, культивировать и даже оценивать, но они не складываются сами собой в целое. Только каждый сам в меру своих способностей будет их интегрировать. Как это происходило и раньше: учитель в рамках различных кампаний нечто проводил и отчитывался, а ученик из этих кампаний строил что-то своё. И его реальное умение опирается на его интегрирующие способности. Как мы их оценим? А можем? А нужно?

Поскольку анализ нужен, предлагаю такую терминологическую базу:

• Конкретные аспекты процесса (по заданным критериям): условия, организационное и методическое обеспечение, инструментальная насыщенность и другие.
• Качество обучения как рефлексию процесса обучения можно оценить только на основании критериев, которые сформулированы заказчиком обучения. Если их нет, оценка может быть исключительно субъективной и неформализованной, основанной на удовлетворённости. Разные участники образовательного процесса будут иметь разные оценки, в зависимости от своих осознанных или неосознанных целей обучения и роли в процессе обучения. С большой вероятностью, интуитивно обобщая разные этапы от ожидания и целей в начале до эмоций в конце с опорой на память об изменениях в процессе.
• Результаты обучения как изменения, произошедшие по окончании обучения – приобретённые компетенции, издержки на организацию обучения, эффективность обучения, новые знания или аспекты, выявленные в процессе обучения и достойные учёта в организации следующего обучения. Можно включить удовлетворённость от процесса как эмоциональный результат процесса. У разных участников могут быть разные приоритеты оценки.
• Результат образования для конкретного человека – его картина мира на данный момент с самопозиционированием в нём: связи, зависимости, способы взаимодействия, ожидания, возможности, желания, цели, планы изменений.
• Результаты системы образования – состояние науки, культуры, техники, рынка труда; ценности и ожидания граждан, способы и характер их взаимодействия, отношение к другим людям и странам мира.
• Качество образования конкретного человека (образованность) – соответствие его представлений о мире тем задачам, которые он решает или собирается решать.
• Качество системы образования – соответствие системы образования потребностям граждан, удовлетворённость граждан условиями получения образования. Для каждого уровня системы должен оцениваться свой уровень соответствия: от задач обучения конкретным компетенциям до потребностей всего общества и государства, в частности науки, культуры, техники, рынка труда.

Хочу обратить внимание, что эти терминологические уточнения выходят за рамки формальной терминологии – это ценностно иная картина оценки, изначально разводящая объекты и субъекты оценки, учитывающая разные интересы. Традиционная интегрально неразборчивая «оценка качества образования» подсознательно уводит все оценки на административное поле.

Можно пытаться оценивать все перечисленные параметры, но наиболее актуальными, на мой взгляд, должны быть стандартизованные компетенции, или навыки. Именно они востребованы. Именно они проверяемы. Именно они могут служить ориентиром для всего остального. Например, если они получены в процессе обучения, то они являются его результатом. Компетенцию по решению некоторого типа задач традиционно определяет экзамен. Должен ли для оценки компетенций использоваться именно экзамен, определяется требованиями по оценке. Это лишь один из вариантов.

Чем заменить итоговый экзамен?

Современная ситуация характерна переносом акцента с обучения как традиционного производственного конвейера на заинтересованное обучение по инициативе активного мотивированного ученика. К сожалению, далеко не все ученики готовы играть такую роль, но именно такие ученики наиболее пассионарны и эффективны для образовательного результата страны. Поэтому такая модель обучения должна рассматриваться как желательная и целевая. А значит, модель старого экзамена как инструмента административного контроля за нерадивым учеником должна смениться на иную, органичную для самостоятельного активного ученика. Но без ущерба для нерадивых, которых пока довольно много.

Поскольку результат обучения интересует разных участников образовательного процесса с разных сторон, они в совокупности формируют общественную заинтересованность в честном результате – в отличие от традиционного экзамена. Если использовать опыт организации ЕГЭ для создания сети независимых постоянно действующих центров оценки, которые бы могли гарантированно и честно оценить уровень стандартизованных компетенций по всем существующим областям знаний, то это позволит одновременно снять все претензии к ЕГЭ как итоговому экзамену (его не станет) и выстроить гибкий контур государственного контроля за системой образования.

Центры оценки компетенций заинтересованы в честности – это главная их ценность по условиям бизнеса. Такие центры делают ненужной и бессмысленной отметку в качестве административного инструмента в школе и в любой другой образовательной организации: уровень знаний по всем областям и на всех уровнях в любое время по желанию оценивает только сертифицированный центр. Такие центры обеспечивают декларированное в законе право на любые формы организации образования, ибо каждый учится где и как хочет, а подтверждает результаты в любое время только центр: учись в любом ритме, темпе и направлении.

Вынос процедуры оценки в независимые структуры и отмена привязки её ко времени приводит к радикальному изменению системы отношений – делает ученика и образовательную организацию равноправными независимыми игроками.

Каждый человек начинает сам выстраивать оценку своей компетентности и отвечать за неё.

Образовательные организации теряют контроль над планированием обучения конкретного человека и должны его заинтересовывать интересными программами и качественным обучением. Только авторитет и польза образовательной организации смогут привлечь и удержать ученика при такой схеме оценки результатов. Активный ученик будет искать более эффективные способы обучения. Пассивный ученик будет выбирать минимальные затраты физических и умственных усилий. Но любой ученик сам является инициатором тестирования, потому что ему нужно предъявлять свои результаты при всех учебных и кадровых переходах. Этот результат является его подтверждённой компетентностью и одновременно он косвенно формирует обобщённые характеристики результативности системы образования.

Чтобы такая схема была более продуктивной, стоит изменить традиционные образовательные цензы в виде аттестатов и дипломов на гибкие развивающиеся по мере необходимости «карты знаний», задающие пространство обучения. Движение по ним может формировать гибкие личностные профили. Сопоставляя их с компетентностными профилями, людей будут принимать на работу и учёбу, выявлять зоны развития при проектировании карьеры. Естественно, в цифровом виде – бумажные подтверждения образовательного ценза уже устарели и являются удивительным рудиментом бумажной эпохи.

Заключение

Обсуждая качество в сфере образования, необходимо уходить от непродуктивных терминов, использовать более чёткие названия для каждого из аспектов, которые действительно подвергаются оценке. Это заставит более глубоко осмысливать множественные роли участников образовательного процесса и их цели.

Прежде всего нужно ограничить применение слова «образование», которое слишком широко обобщает многообразие покрываемых им смыслов и препятствует концентрации обсуждения на конкретном его аспекте.

Важно осознать различие понятий «образование» и «обучение», которое заметно глубже, чем мы привыкли думать.

В подавляющем большинстве современных упоминаний под «образованием» подразумевается «обучение», что могло быть приемлемо когда-то давно, но не сейчас. В профессиональной среде стоило бы считать моветоном употребление слова «образование» в расширительном смысле, без уточнения или при наличии более точного недвусмысленного термина.

Как бы мы ни обсуждали множественные смыслы результатов обучения, реальный и наиболее востребованный мониторинг может вестись только на основании конкретных критериев и надёжных испытаний. Они нужны всем участникам образовательного процесса как регулятор образовательных и трудовых отношений. Но не как проверка детали на выходе с конвейера, а как добровольная сертификация свободного заинтересованного в обучении или работе человека. Старые образовательные цензы на основе аттестатов и дипломов себя исчерпали. Исчерпали себя и методы их подтверждения. Достоверная независимая система проверки освоенных компетенций, обеспечивающая прозрачный доступ по сети всем юридическим и физическим лицам, заинтересованным в построении образовательных или трудовых отношений, стала бы стержнем современной системы образования. Одни участники процесса наполняли бы её предметами и критериями оценки, другие под них строили бы программы обучения, третьи на основе карты образовательных возможностей строили бы образовательные траектории.

О качестве чего угодно можно говорить только тогда, когда есть множественные цели, выбор, критерии достижения цели и достоверная система контроля достжений. Широкий выбор и прозрачный контроль снимут львиную долю проблем, которые мы так давно и довольно безуспешно обсуждаем в сфере образования.

Источник: Просветительский медиа-проект «Newtonew»