pashap: (pasha)
pashap ([personal profile] pashap) wrote2009-02-15 04:40 pm
Entry tags:

Про ЕГЭ

А вот теперь - конкретно про ЕГЭ, в качестве ответа на пост Андрея Ленского и по результатам дискуссии с [livejournal.com profile] boldogg в ЖЖ у Раисы. У меня сформулировалось три пункта, по которым мне не кажется правильным использование ЕГЭ в качестве вступительных экзаменов.

1. Я исхожу из того, что только хороший тест сравним по своей эффективности с устным экзаменом (не говоря уж о письменном). Однако составление хорошего теста - довольно сложное занятие, требующее затрат времени. Грубо говоря, вопрос, имеющий 4 варианта ответа, должен быть устроен так, чтобы любой из неправильных ответов казался правдоподобным. Если из 4-х ответов 2 можно отсеять соображениями здравого смысла - хорошим такой тестовый вопрос считать нельзя. Вопрос, рассчитанный только на знание формулы - т.е. предполагающий, что человек правильным образом подставит в формулу данные ему в вопросе параметры и получит верный ответ - тоже никуда не годится, потому что набор параметров настолько сильно подсказывает, какую формулу надо применить, что необходимости подумать о смысле самого вопроса не возникает.

К сожалению, тестовые задания по физике и математике, приведенные на сайте http://www.rosbalt.ru/eg/ , не являются в моем понимании хорошими. То есть они действительно не провальны, однако из 25 вопросов по физике критериям хорошего вопроса, сформулированным мною выше, соотвествуют не более 5-ти. Среди 10 вопросов по математике я вообще хороших вопросов не обнаружил. Понятно, что это лишь часть A, с частями В и С скорее всего ситуация немного лучше - однако есть у меня опасение, что и там хватает некачественных вопросов.

2. Чем проще вопросы испытания, тем больше соблазнов готовится к нему, изучая не общую систему знаний, а только примеры конкретных вопросов или задач, с которыми придется иметь дело. Поэтому тест гораздо больше письменного экзамена провоцирует подготовку к нему методом набивания руки. Такая подготовка позволяет сдать тест, однако оставляет удручающие провалы в знаниях человека в данной области знаний, от которых потом приходится страдать их вузовским преподавателям.

3. Я согласен с тем, что введение ЕГЭ позволит резко уменьшить уровень взяточничества в приемных комиссиях. Однако, насколько я понимаю, мест сдачи ЕГЭ в стране больше, чем приемных комиссий. Поэтому как только возникнут способы фальсификации результатов ЕГЭ - уровень взяточничества только возрастет. Другими словами, на несколько лет ЕГЭ как способ бороться со взяточничеством осмысленен, однако в долгосрочной перспективе - скорее провален.

UPD. Моя оценка частей В и С заданий ЕГЭ по математике и физике вот тут в комментах: http://pashap.livejournal.com/72816.html?thread=1545072#1545072

[identity profile] pashap.livejournal.com 2009-02-15 02:02 pm (UTC)(link)
Я видел сравнимый с устным экзаменом тест. Однако это была штучная работа одного из лучших известных мне преподавателей. В нем помимо описанных мною в посте требований к тесту было выполнено еще одно - разные вопросы теста своими формулировками влияли на результаты ответов на последующие вопросы. Высший пилотаж, и вряд ли кто-либо когда-либо затратит необходимое количество времени и усилий, чтоб сделать такое в масштабах ЕГЭ.

[identity profile] aceler.livejournal.com 2009-02-15 04:11 pm (UTC)(link)
Проблема теста по сравнению с экзаменом состоит в том, что тест имеет заранее определённый правильный ответ, а устный экзамен нет. Помните историю «как определить высоту башни с помощью барометра?».

Соответственно, если тесты будут применять для проверки знаний, то и обучение будет принимать форму теста, а это ведёт к абсолютно шаблонному мышлению. Какими бы хорошими ни были тесты.

[identity profile] pashap.livejournal.com 2009-02-15 04:25 pm (UTC)(link)
Если для того, чтобы понять вопрос теста, нужно правильно достроить модель происходящего - то тест начинает работать на проверку умений применения знаний, а не только собственно знания. Подобный тест имеет настолько же правильный ответ, что и устный экзамен - т.е. позволяет идти разными путями к правильному ответу. Так что тесты, не ведущие к шаблонному мышлению, теоретически возможны. Однако составление такого теста значительно дороже того, что мы сейчас наблюдаем в ЕГЭ.

[identity profile] aceler.livejournal.com 2009-02-15 04:31 pm (UTC)(link)
> т.е. позволяет идти разными путями к правильному ответу.

Это если правильный ответ один и он вообще есть. Хорошо в математике, когда речь идёт о решении уравнений с единственным ответом, куда труднее в физике, но там тоже всё однозначно. А гуманитарные предметы?

[identity profile] alexkuklin.livejournal.com 2009-02-15 04:39 pm (UTC)(link)
С одной стороны, да.
С другой стороны, попытка применять параметр "умеет думать", неформализуемый в рамках существующих методик измерений, к потоковой обработке (каковой является вступительный экзамен), приводит к куче негативных последствий, начиная с "а судьи кто?"

Собственно, под http://pashap.livejournal.com/72816.html?thread=1540208#t1540208 - пожалуй, подпишусь

[identity profile] aceler.livejournal.com 2009-02-15 04:44 pm (UTC)(link)
А чем плох письменный экзамен в данном случае?

[identity profile] alexkuklin.livejournal.com 2009-02-15 05:13 pm (UTC)(link)
Отсутствием четкой метрики оценки.

[identity profile] pashap.livejournal.com 2009-02-15 05:21 pm (UTC)(link)
В применении к письменному экзамену по математике это совершенно неверно.

[identity profile] alexkuklin.livejournal.com 2009-02-15 05:32 pm (UTC)(link)
Да, но ЕГЭ по математике не вызывает такую бурю эмоций, как ЕГЭ по остальным предметам.

[identity profile] pashap.livejournal.com 2009-02-15 05:35 pm (UTC)(link)
И в третий раз я здесь скажу, что по вопросам гуманитарных экзаменов я не копенгаген :)

[identity profile] pashap.livejournal.com 2009-02-15 04:44 pm (UTC)(link)
На уровне школьной и даже младшекурсной физики правильный ответ тоже всегда есть. Насчет гуманитарных предметов не буду спорить, поскольку в них я плохо разбираюсь.

[identity profile] aceler.livejournal.com 2009-02-15 04:55 pm (UTC)(link)
> На уровне школьной и даже младшекурсной физики правильный ответ тоже всегда есть.

Как измерить высоту башни с помощью барометра? :D Правильный ответ, конечно, есть. Сколько их, этих правильных ответов?

[identity profile] pashap.livejournal.com 2009-02-15 04:59 pm (UTC)(link)
Это не вопрос. А вопрос в таких условиях не как измерить - а чему равна. Пожалуйста, меряйте, как хотите :)

[identity profile] aceler.livejournal.com 2009-02-15 05:06 pm (UTC)(link)
ОК. Только вот, боюсь, в тесте будет написано, что барометром измерили наверху и внизу, и предложат определить высоту. Иного способа, кроме как посчитать разницу давлений, здесь нет и быть не может.

[identity profile] alexkuklin.livejournal.com 2009-02-15 05:12 pm (UTC)(link)
Ты, вообще, билеты ЕГЭ видел?
Там есть еще и открытый раздел.

[identity profile] aceler.livejournal.com 2009-02-15 05:25 pm (UTC)(link)
Видел. Обнаружив в тесте по русскому вопросы с несколькими правильными вариантами решения, я понял, что проблема есть.

Скажи лучше, если кандидат по тесту набирает половину, а по остальным набирает прилично — это будет хорошо?

[identity profile] alexkuklin.livejournal.com 2009-02-15 05:30 pm (UTC)(link)
> Видел. Обнаружив в тесте по русскому вопросы с несколькими правильными вариантами решения, я понял, что проблема есть.

Это техническая проблема качества измерительных материалов.

> Скажи лучше, если кандидат по тесту набирает половину, а по остальным набирает прилично — это будет хорошо?

За каждый блок идут баллы, они суммируются.

(no subject)

[identity profile] aceler.livejournal.com - 2009-02-15 17:32 (UTC) - Expand

(no subject)

[identity profile] alexkuklin.livejournal.com - 2009-02-15 17:37 (UTC) - Expand

(no subject)

[identity profile] aceler.livejournal.com - 2009-02-15 17:41 (UTC) - Expand

(no subject)

[identity profile] alexkuklin.livejournal.com - 2009-02-15 18:09 (UTC) - Expand

(no subject)

[identity profile] aceler.livejournal.com - 2009-02-15 18:21 (UTC) - Expand

[identity profile] pashap.livejournal.com 2009-02-15 05:28 pm (UTC)(link)
Если формулировать задачу подобным образом - чтоб были разные варианты ее решения, то необходимо давать гораздо больше информации для системы, чем необходимо для ее решения. Вообще, избыточная для решения задачи информация в задачах школьного уровня - это очень хороший способ отличить действительно думающих от тех, кто пытается применить известные им формулы, не задумываясь о том, что они значат. Я был даже удивлен, увидев среди вопросов демонстрационного теста по физике один такой вопрос.

Однако, к сожалению, вопрос о задачах такого уровня в рамках данной дискуссии не стоит - и вопросы ЕГЭ, и задачи классических письменных экзаменов предполагают более-менее один путь решения задачи. Просто самые примитивные задачи не допускают никаких развилок, а задачи нормального уровня позволяют часть решения пройти немного разными путями.

[identity profile] aceler.livejournal.com 2009-02-15 05:32 pm (UTC)(link)
Один вопрос... :)

Я бы сделал, например, так: Определите высоту башни, зная, что:

Солнце восходит на востоке
Давление на верхней площадке X мрс
Сила ветра в этот день составляет Y м/с
Башня сложена из камня плотностью Z км/м³

И так далее. И как минимум два пути решения.

[identity profile] alexkuklin.livejournal.com 2009-02-15 05:32 pm (UTC)(link)
Тебе подсказать, где можно принять участие в разработке измерительных материалов? :)

(no subject)

[identity profile] aceler.livejournal.com - 2009-02-15 17:42 (UTC) - Expand

[identity profile] pashap.livejournal.com 2009-02-15 05:36 pm (UTC)(link)
Да, как вариант.

[identity profile] rhunwolf.livejournal.com 2009-02-26 09:11 pm (UTC)(link)
*разные вопросы теста своими формулировками влияли на результаты ответов на последующие вопросы

тест был бумажный или компьютерный? если второе - он давался частями или целиком?

[identity profile] pashap.livejournal.com 2009-02-26 09:31 pm (UTC)(link)
Бумажный. Целиком.

[identity profile] rhunwolf.livejournal.com 2009-02-27 07:04 pm (UTC)(link)
Тогда я не понимаю, как?

[identity profile] pashap.livejournal.com 2009-02-27 07:11 pm (UTC)(link)
Путем направления мысли каждым вопросом по тому или иному пути.