+32
2 января 2009
В закладки
Обсудить
Жалоба
16+

Вся правда от создателя ЕГЭ

Новости ЕГЭ
Создатель ЕГЭ: «Использование этого теста не принесет пользы российскому образованию»

  До того, как закон о ЕГЭ вступит в силу остался месяц. Владимир Хлебников – это тот самый человек, который разработал технологию тестирования еще до начала эксперимента по ЕГЭ для централизованного добровольного абитуриентского тестирования, и с самого начала эксперимента руководил центром обработки результатов ЕГЭ. Ему лучше всех были видны и недостатки методики. Но когда он начал о них открыто говорить, это оказалось никому не нужно. Ведомство не пожелало ничего радикально менять.
Из статьи В. Хлебникова в «Новой газете»:

Главное в ЕГЭ – это результаты. Что же измеряет ЕГЭ?!

  Можно с уверенностью сказать, что смысл оценок по результатам ЕГЭ (тестовый балл) не понимает практически никто. Пусть два учащихся с примерным одинаковым уровнем подготовленности участвовали в тестировании. Каждый из них получил свой вариант теста. Варианты имели разную сложность. Одному ученику достался вариант более простой, а другому более трудный. Это явление весьма распространенное, т.к. создать даже два варианта теста одинаковой сложности практически невозможно.

  Все участники, набравшие одинаковое число верных ответов (первичных баллов), получат одинаковый тестовый балл вне зависимости от сложности доставшегося варианта теста.

  А эти варианты ох как отличаются друг от друга по сложности! Специалисты это хорошо знают.

  Такой ЕГЭ не гарантирует точные и справедливые результаты. Следовательно, результаты ЕГЭ нельзя использовать для отбора поступающих в вузы, ввиду их научной необоснованности!

  Гораздо хуже обстоит дело с использованием результатов ЕГЭ для целей итоговой аттестации. Повторим, что методика расчёта тестовых баллов ЕГЭ определяет уровень подготовленности учащихся, сравнивая их знания друг с другом, но не сравнивая с требованиями учебной программы. Эта методика предназначена только для отбора поступающих в вузы. Сделать суждение о степени освоения школьного предмета для итоговой аттестации по результатам ЕГЭ в принципе невозможно.

  До сих пор, никакие даже самые продвинутые тестологи мира не смогли создать теста, который мог быть использован для целей итоговой аттестации и для отбора наиболее подготовленных поступающих в вузы.

  Наши коллеги в Белоруссии, Азербайджане, Казахстане, Узбекистане не совмещают итоговую аттестацию со вступительными испытаниями. Государственные испытания в тестовой форме проводятся только для отбора поступающих в вузы, причем с привлечением служб национальной безопасности.

  Россия пошла иным путём, который при всей его кажущейся привлекательности, не имеет последователей. Отмеченные недостатки являются основными, препятствующими достижению поставленных целей ЕГЭ.


Можно ли исправить имеющиеся недостатки?

  Для отбора поступающих в вуз проблема решается просто. Для этого достаточно изменить методику обработки первичных баллов таким образом, чтобы она учитывала различную сложность используемых вариантов тестов. Это сделать нетрудно, так как такая методика существует и много лет используется при проведении абитуриентского централизованного тестирования.

  Многочисленные иные недостатки ЕГЭ при этом остаются, но о них скажем позднее.

  Для целей итоговой аттестации проблема с ЕГЭ ремонту не подлежит. Итоговая аттестация требует иных измерительных материалов и методик обработки результатов их использования.

  Процедуры итоговой аттестации и отбора поступающих в вузы несовместимы. Их необходимо разделить.

  Перевод тестовых баллов ЕГЭ в пятибалльную шкалу для целей итоговой аттестации чиновники осуществляют произвольно. В первые годы эксперимента по введению ЕГЭ за основу бралось правило: двоечников и отличников устанавливалось по десять процентов от общего числа участников. Троечников и хорошистов – по сорок процентов от общего числа участников. В последующие годы доля учащихся с различными отметками во избежание нелепицы корректировалась. Так, например, неприлично ставить отметку «удовлетворительно» по математике за три-четыре верных ответа. На простейшие вопросы в части «А» даже восьмиклассник даст три-четыре верных ответа. Учащиеся 10-11-ых классов сразу смекнут, что тройка им уже гарантирована, и далее всерьез учиться не будут. Вот и пришлось для сохранения приличия ставить тройку за большее число верных ответов. А это привело к тому, что доля двоечников по математике возросла до стабильного по годам уровня в 22 – 23 процента от общего числа участников. Так уж учат у нас в школе математике. Рассмотрим вопрос о погрешности измерений учебных достижений, получаемых при проведении ЕГЭ.

  В Федеральном центре тестирования проводились расчеты погрешностей результатов ЕГЭ. Было определено, что в середине шкалы измерений (от 40 до 60 баллов) величина погрешности практически по всем предметам составляет ± 3 тестовых балла. Погрешности возрастают по мере смещения в сторону более низких и более высоких оценок. В районе 90 баллов погрешность составляет от 5 до 10 тестовых баллов. Эта погрешность неустранима при нынешней идеологии ЕГЭ, т.е. как говорят математики, - это погрешность метода. На практике это означает, что вуз, выбирая из двух поступающих с результатами 84 и 86 баллов по предмету, отдает предпочтение, казалось бы, лучшему – 86 балльному результату. В некоторых вузах результат меньше 85 баллов вообще не рассматривается. А на самом деле результаты этих поступающих 84±5 и 86±5 баллов, и кто из них лучше знает предмет уже не очевидно. Если тестовые баллы испытуемых отличаются друг от друга на величину меньшую, чем погрешность измерения, то делать суждение о превосходстве того или иного результата не корректно. Из этого следует, что ЕГЭ плохо дифференцирует испытуемых в наиболее важной для приема в вуз зоне – области наивысших тестовых баллов. Имеет ли право ЕГЭ на систематические неточности такого размера? Ничего не подозревающим выпускникам школ и приёмным комиссиям вузов величина тестового балла объявляется без тени сомнения.

  Неучёт факта, что погрешность измерения в области высоких баллов недопустимо велика, приводит к тому, что результаты, указанные в свидетельствах ЕГЭ, не отражают реального уровня подготовленности испытуемых. Это зачастую вызывает неосознанное, но интуитивно верное возмущение выпускников и их родителей.

  Обсудим коротко экзаменационные материалы, используемые при проведении ЕГЭ. Их разрабатывает специализированное государственное учреждение Федеральный институт педагогических измерений (ФИПИ). Ежегодно для ЕГЭ по каждому предмету необходимо разработать десятки, а по математике и по русскому языку по сотне оригинальных вариантов тестов высокого качества. Разные варианты тестов должны быть в идеале одинаковой трудности и с одинаковыми измерительными свойствами. Эта задача невыполнима! Общественность не знает, по каким параметрам и измерительным свойствам отбираются тесты ЕГЭ. Материалы сдаются в тираж в феврале – марте. Удовлетворительное опробывание (не путать с апробацией) тестовых материалов к этому сроку провести невозможно. Измерительные свойства тестов, используемых в ЕГЭ, не знает никто ни до, ни после экзамена.

  Ввиду высокого статуса ЕГЭ, к разработке измерительных материалов потянулось множество специалистов – предметников. Для них ЕГЭ – это и заработок, и престиж. Выбрать было из кого. Отобрали самых «маститых». Ну не могут они делать простенькие задания. И в части «С» появились задания убойной силы, причем не лучшего качества за исключением задач типа С3. Ну и кто может их выполнить? Все задания части «С» выполняют единицы испытуемых, а двоечников по математике более двадцати процентов от общего числа участников ЕГЭ, т.е. более двухсот тысяч человек. Зачем задания с такой трудностью тиражировать, рассылать по всей стране, собирать предметные комиссии для проверки, расходовать государственные средства? Все это ради единичных случаев, в то время, как сотни тысяч выпускников требуют более пристального внимания. Для чего делается такой разброс трудности заданий? Видимо у руководителей эксперимента была уверенность, что одним достаточно коротким тестом возможно оценить знания всех учащихся (и посредственных, и элитных). Но это невозможно. Кто из ученых дал такой совет? Нет таблетки от всех болезней.


Структура тестовых материалов ЕГЭ плохо продумана и нуждается в переработке.


  Казалось бы, что качество тестов должно расти вместе с опытом их разработки. Но этого не происходит. Нарекания со стороны специалистов были ранее, есть и сейчас. Не вдаваясь в подробности, можно смело утверждать, что по процедуре разработки экзаменационных материалов ЕГЭ необходим соответствующий государственный стандарт, утверждённый Агентством по техническому регулированию (бывший Госстандарт). Содержание экзаменационных материалов, как и прописано в законе, остается в ведении системы образования. Но процесс разработки экзаменационных материалов, требования к качеству тестов, к их измерительным свойствам, их трудности, способности дифференцировать учащихся по степени подготовленности и прочим свойствам нужно определить и описать в соответствии с хорошо продуманной процедурой разработки стандартов. Иначе не понятно, что за тесты используются при проведении ЕГЭ. Неизвестны их измерительные свойства. С какой погрешностью они определяют уровень подготовленности учащихся? Никто не знает ответа на эти вопросы. Никогда не публикуются материалы с характеристиками используемых тестов. На Западе такие публикации совершенно обязательны. Руководители Рособрнадзора такие задачи перед исполнителями не ставят. А те и довольны. Сами тесты разрабатывают, сами же их и хвалят. Хотя и признают, что бывают отдельные недостатки.

  Исключительно большое значение для ЕГЭ имеет проблема информационной безопасности. Несанкционированное вмешательство в любой технологический элемент ЕГЭ может исказить результаты не только одного испытуемого или небольших групп на уровне класса или школы. Распространение злоумышленниками по каналам Интернет накануне экзамена похищенных вариантов тестов и ответов к ним может привести к искажению результатов ЕГЭ в целых регионах. Выпускники могут несправедливо получить высокие тестовые баллы, и аннулировать их будет невозможно. В вузы будут зачислены совсем не лучшие поступающие. Заметим, что самый большой вред – преждевременное раскрытие тестовых материалов в Интернете – совершают люди с наименьшей материальной мотивацией – хулиганы.

  Нередки случаи прорешивания экзаменационных заданий группами преподавателей, собранных в якобы опечатанных кабинетах пунктов проведения ЕГЭ. Возможна подмена бланков ответов избранных испытуемых из резервных комплектов бланков и т.д. Сколь бы ни была изощрённой технология ЕГЭ, всех мер предосторожности предусмотреть невозможно. Свидетельством этого являются аномальные факты массового получения чрезвычайно высоких результатов ЕГЭ. Например, в 2005 году в ряде сельских районов Башкирии на ЕГЭ по математике оценку «отлично» получили до 85 процентов экзаменующихся. В том же году в одном из районов Кировской области были получены самые высокие в стране результаты по русскому языку. Такие результаты выпускникам Москвы и Санкт – Петербурга не снились. Досадно, что зафиксировать нарушения на месте или отменить самые вопиющие результаты невозможно. Не позволят установленные организаторами правила и круговая порука.

  Вмешательство в результаты ЕГЭ возможно! Это реальный факт. Процедура ЕГЭ не даёт никаких гарантий того, что несанкционированное вмешательство исключено.

  Высокий статус ЕГЭ создаёт сильнейшую мотивацию к получению высоких результатов у выпускников и их родителей. С другой стороны, по долгу службы учителя и руководители органов управления образования тоже далеко не безразличны к тому, как выглядят их выпускники и подведомственные учреждения по результатам внешнего контроля, т.е. ЕГЭ. Имеем уникальную ситуацию – стремление всех лиц, причастных к ЕГЭ, к высоким результатам. А это сила не малая. Уже выработался простой и безопасный способ всё устроить. Суть его такова. За несколько дней до экзамена учителя проводят консультации для выпускников. В органы управления образованием субъектов Федерации к этому времени уже поступают материалы ЕГЭ по соответствующему предмету. Материалы поступают с запасом, так что досрочное вскрытие одного «Секьюрпака» и ознакомление с его содержанием совершенно незаметно. Всем известно, что по каждому предмету на регион имеется всего лишь пять оригинальных тестов. Остальные варианты формируются путем перемешивания заданий из пяти оригинальных. Далее совсем просто. Из реальных материалов ЕГЭ специалисты – предметники быстро делают похожие тесты – аналоги. Материалы тиражируются и рассылаются в школы для использования на консультациях. Там материалы прорешиваются. Через пару дней выпускники на экзамене получают тесты, содержащие задания очень похожие на те, которые разбирались на консультации. Абсолютно точно повторить решения и указать верные ответы на все задания не сможет никто, но можно гарантировать, что в целом весь массив выпускников получит более высокие тестовые баллы ЕГЭ. Выбросов аномально высоких результатов не будет. Все довольны – выпускники, родители, учителя, руководители и пр. Выявить нарушение невозможно.

  Так изящно вскрывается система информационной безопасности ЕГЭ. Преодолеть её возможно только одним способом – абсолютно отстранить от процедуры ЕГЭ всех работников системы образования – от министра до дворника!

  А без этого вся суета с ЕГЭ – пустые хлопоты.


Зафиксируем изложенное.


— Оценки в свидетельствах ЕГЭ, которые должны стать единственным критерием для приема в государственные вузы России, научно не обоснованны. Они определены без учета сложности вариантов тестов, что в принципе приводит к завуалированной несправедливости.

— Использование результатов ЕГЭ для итоговой аттестации в школах недопустимо, так как ЕГЭ не оценивает степень освоения учащимися предмета. Методика расчета тестовых баллов ЕГЭ для этого совсем не предназначена. ЕГЭ тут вообще не причем. Школьные отметки по методике Рособрнадзора можно выставлять без всякого ЕГЭ. Для этого управлениям образования надо указать установленный свыше процент двоек, троек, четвёрок и пятёрок по предметам. Абсурд? Да! Но именно так всё и происходит. Только после проведения дорогостоящей процедуры ЕГЭ.

  Доля учащихся, которым выставляется соответствующая школьная отметка, волюнтаристски назначается чиновниками. Для проведения ЕГЭ ежегодно привлекается более миллиона человек – выпускников и организаторов. Тысячи преподавателей – предметников разрабатывают тестовые задания. Тестовые материалы печатаются, упаковываются, рассылаются. Ответы обрабатываются. Расходуются громадные государственные средства. И всё впустую. Вся акция ЕГЭ методически не продумана и своих целей, в принципе, достичь не может.

  В этом не ничего удивительного, т.к. при проведении эксперимента по введению ЕГЭ серьёзной подготовительной работы не проводилось. Концепции, технического задания, рабочего проекта, цели, задач, рабочих гипотез при проведении эксперимента по введению ЕГЭ не было. Нет критериев, по которым можно судить об успешности эксперимента.

  Главная причина состоит в исключительно высоком статусе результатов. Целью школы стало теперь не обучение и развитие личности учащихся, а погоня за высокими показателями при сдаче ЕГЭ. Учебный процесс в старших классах существенно меняется. Школа стала не учить, а натаскивать на конкретные задания, вопросы, темы. Учебная программа меняется. Фактически сокращается число часов преподавания математики. Учитель вместо объяснения материала вынужден с февраля месяца натаскивать выпускников на задания в форме ЕГЭ. Литература перестала быть обязательным предметом. Подвижки происходят по всем дисциплинам, контроль за освоением которых происходит в форме ЕГЭ. И кто, глядя на это, скажет, что наши дети стали более образованными? Вред от таких побочных эффектов ЕГЭ много больше, чем польза от использования единой процедуры и тестов на экзамене.


Резюме.



  Вводимый законом с 2009 г. ЕГЭ научно необоснован, неправильно сконструирован, имеет массу существенных недостатков. Его использование не принесет пользы Российскому образованию.

  Введение ЕГЭ целесообразно приостановить.

  Необходимо с учетом накопленного опыта пересмотреть его основные положения. Создать концепцию по оцениванию учебных достижений учащихся, получить общественное согласие, разработать и внедрить новые методы и процедуры оценивания. Создать в России научную школу по оценке учебных достижений учащихся. Гордиться полученными результатами.

  Не допускать возврата к ситуации десятилетней давности, когда оценки в школах и при поступлении в вузы отдавались на откуп тем же школам и вузам.

  Это означало бы не только признание ошибок, допущенных при введении ЕГЭ, но и отбросило бы Российское образование на много – много лет назад. Нельзя предавать забвению труд сотен и тысяч энтузиастов по созданию в России научных и производственных основ объективного оценивания учебных достижений. Это было бы регрессом и ошибкой.

Владимир Хлебников,
доктор технических наук
    • smileblushsmirkconfusedhushedpensivecry
      angrysunglasses
Обработка персональных данных

Отправляя комментарий, вы даёте согласие на обработку своих персональных данных на условиях и для целей, определённых в политике в отношении обработки персональных данных, а также принимаете Пользовательское соглашение.

  1. 67 11 февраля 2010 07:38 | Цитировать | Ответить
    -1
    согласна.... ведь программе, которую учат в школах, ЕГЭ совершенно не соответствует...
  2. гость 3 сентября 2009 17:43 | Цитировать | Ответить
    0
    Только детей мучают!!!!!!!
  3. 0
    Сегоднящнее ЕГЭ можно отождествлять со сложной хирургической операцией: вырезать органы, совершенно не зная диагноза. А это приводит к неминуемой смерти... Делайте выводы!!!!