Об образовании и тестировании
Jan. 30th, 2006 12:52 am![[personal profile]](https://www.dreamwidth.org/img/silk/identity/user.png){kind=small}
netchЧто такое эта PISA, задачи из которой плохо решали российские школьники. Thx to ![[livejournal.com profile]](https://www.dreamwidth.org/img/external/lj-userinfo.gif)
beldmit
Malx, ты приводил статьи в защиту PISA - что скажешь?
beldmitMalx, ты приводил статьи в защиту PISA - что скажешь?
![[identity profile]](https://www.dreamwidth.org/img/silk/identity/openid.png){kind=small}
no subject
Date: 2006-01-29 11:22 pm (UTC)no subject
Date: 2006-01-29 11:22 pm (UTC)> 1. Мэри живет в двух километрах от школы, а Мартин в пяти. На каком расстоянии Мэри и Мартин живут друг от друга?
Согласен, здесь идиотия явная. Ответ неоднозначен даже для 1D-пространств. :)
> a) Вас пригласили прочитать лекцию в обществе пацифистов. Вы намерены объяснить, что оборонный бюджет за это время уменьшился. Объясните, как Вы это сделаете.
> b) Вас пригласили прочитать лекцию в военной академии. Вы намерены объяснить, что оборонный бюджет за это время увеличился. Объясните, как Вы это сделаете.
А вот здесь соглашусь с авторами теста. Человек должен уметь солгать и схитрить, иначе в жизни ему придётся туго.
Впрочем, остальные задачи свидетельствуют не в пользу тестов.
no subject
Date: 2006-01-29 11:59 pm (UTC)Ну да, Вы ещё манхеттенскую метрику вспомните :)
no subject
Date: 2006-01-30 12:06 am (UTC)> Согласен, здесь идиотия явная. Ответ неоднозначен даже для 1D-пространств. :)
Правильный ответ: от 3 до 7. И расписать почему и когда :)
Думать нужно "ширше"
no subject
Date: 2006-01-30 12:38 am (UTC)no subject
Date: 2006-01-30 03:43 pm (UTC)no subject
Date: 2006-01-30 04:01 pm (UTC)no subject
Date: 2006-01-30 02:54 am (UTC)Это тест по математике, а не по политической проституции.
no subject
Date: 2006-01-30 03:44 pm (UTC)Что до "проституции" - не надо меня уверять, что дети не умеют врать :)
Re: Reply to your comment...
Date: 2006-01-30 03:46 pm (UTC)нерелевантная.
no subject
Date: 2006-01-29 11:30 pm (UTC)no subject
Date: 2006-01-29 11:32 pm (UTC)Надеюсь, что комментарий не требуется.
Ну почему же. Очень интересная задача.
Мэри от мартина находится на расстоянии не меньшем, чем 3 км, и не большим, чем 7.
no subject
Date: 2006-01-29 11:37 pm (UTC)Кстати, ещё не указано (это мы предполагаем), что школа подразумевается одна и та же; в обычной речи если бы сказали "Васе до школы идти пять минут, а Пете ехать час" совершенно не означает что школа у них одна и та же.
no subject
Date: 2006-01-29 11:40 pm (UTC)no subject
Date: 2006-01-29 11:50 pm (UTC)Вот этим, имхо, и проверяется адекватность мышления.
no subject
Date: 2006-01-30 12:08 am (UTC)no subject
Date: 2006-01-30 12:40 am (UTC)no subject
Date: 2006-01-30 12:48 am (UTC)no subject
Date: 2006-01-29 11:36 pm (UTC)И примеров в ней маловато. Про 2 и 5 км хорошо бы знать, какой ответ они считают правильным (как раз если ответ "любое число от 3 до 7" - то это хорошая задача).
С одной стороны, есть вроде бы серьезная критика. С другой - результаты вроде бы коррелируют с интуитивным представлением о том, в каких странах Европы школа лучше. Уж не в России, я Вам как руссий школьный учитель скажу.
Попробую завтра задачи посмотреть внимательнее...
no subject
Date: 2006-01-30 12:37 am (UTC)Статья от 2005-го года. Тестирование PISA - раз в три года (http://www.pisa.oecd.org/ достаточно откровенно об этом рассказывает).
> Задачи Пизы, кстати, достаточно легко доступны (не уверен в русских вариантах, но англ. точно).
Демонстрационный комплект - да. А полный?
Посмотрел я задачу про рост подростков. Действительно попасться на ней тривиально: автоматически срабатывает привычка делать в подобных задачах выводы на основании предоставленных данных, "подтягивая" формулировки под принятые в задаче. Попавшись в ловушку, посмотрел в статью и понял что это за ловушка. Действительно, в такой формулировке она может быть решена только если считать данные роста константными по времени (что тут же опровергается соседней подзадачей, где девочки выросли на 2.3 см за несколько лет).
С обрезанным снизу графиком (буду уже приводить имена файлов - это M179Robbr_Eng3.pdf) - загвоздка несколько более хитрая. Не бывает диаграммы подобного рода, у которой бы столбики не росли от нуля. Но: упор делается не на это, а на понятии "значительного" роста. Тот кто будет рассматривать только верхнюю часть действительно увидит рост более чем в 2 раза; но если сравнить числа - то прирост только на 1%. То есть тут вопрос в естественном визуальном методе защиты от наукообразного обмана: тому кому тяжело подсчитать разницу по числам - метод требовать "полный график" даёт средство получить представление, которое создаёт адекватное визуальное впечатление. Это объясняется и расшифровкой ответов: 22 балла назначено ответу в стиле "No. 8 more robberies is 1.5% increase. Not much in my opinion!"
M510Choic_Eng3 неоднозначна - да, 6 вариантов дополнительных компонентов, но надо ли умножать на 2 потому что ещё 2 варианта выбора базового компонента?
M266Crntr_Eng3 я просто не понял - где там ширина материала?
X423Freez_Eng3 предполагает мгновенную реакцию холодильника. Не уверен, что это будет так (скорее наоборот - инерция до 5 минут обычна).
S127Daylt_Eng3 - тот самый пример с вращением Земли. Действительно, постановка некорректна - для того чтобы это понять надо вспомнить Луну с её одной и той же стороной (плюс-минус градусов 10 из-за либраций) повёрнутой к Земле.
Вкратце по остальным тестам. В принципе я согласен со среднеудовлетворительной оценкой PISA: это действительно умение решать разнообразные реальные задачи. Но - при этом, грубо говоря, не умничая. Тот кто умничает - получит результат заведомо хуже чем "быстрый разумом Гонсалез", выбравший ответ наиболее похожий на правдоподобный просто потому, что он уже освоил не только знания по теме, но и понимание, чего именно от него хотят в конкретной ситуации и как свои знания и свою позицию адаптировать (возможно, при этом упростив, исказив и извратив) до того состояния которое будет влезать в подобные тесты.
Ну а что я с графиком откровенно нарвался - тем более показательный пример ловушки - думаю, и авторы задачи просто не подумали о такой засаде.
no subject
Date: 2006-01-30 01:02 am (UTC)Это почему? Там всё чётко сказано. Две рюшки (сыр с томатами) - это основа. А дальше выбирай что хочешь из четырёх. C(4, 2)
> M266Crntr_Eng3 я просто не понял - где там ширина материала?
А зачем ширина? Ты translation note почитай. Я думал на lingvo.ru уже ползти, но в translation note всё чётко написано ;)
Ответ: B - no (пойду пирожок возьму ;)
no subject
Date: 2006-01-30 12:25 am (UTC)Если я правильно понимаю, то взять производную и показать что она монотонно убывает (или вторую, и показать что в ~12 лет у неё 0)
но для этого надо знать дополнительно кучу вещей: что Нидерланды в предыдущие 20 лет не воевали, что в этот период не было (?) всплеска иммиграции из стран с низкорослым населением, демографических скачков, революции на рынке витаминов или наркотиков и невесть чего еще.
Есть очень хороший тест: тут (http://ilyabirman.ru/meanwhile/keywords/logic). Как раз для тех кто любит придумывать лишние сущности там где их нет ;)
no subject
Date: 2006-01-30 12:42 am (UTC)Я помню этот тест. Но там однозначно видна абсурдность контекста. И - она видна нам, имеющим достаточный опыт борьбы с абсурдом (хотя бы на уровне прохождения вуза). А PISA - напоминаю - предназначена для школьников.
no subject
Date: 2006-01-30 01:05 am (UTC)А школьников нужно сразу учить думать правильно, логическое мышление и прочие рюшки.
no subject
Date: 2006-01-30 09:55 am (UTC)ха
Date: 2006-01-30 07:39 pm (UTC)Malx
Date: 2006-01-31 05:53 pm (UTC)http://www.centeroko.ru/pisa/pisa_res.htm
Объяснение результатов (2000, 2003).
"...Анализ данного распределения показывает большой разброс результатов по стране. Наряду с образовательными учреждениями, имеющими высокие результаты по чтению (превышающие средний международный уровень и соответствующие самому высокому уровню сформированности грамотности чтения (уровни 4 и 5)), имеются учреждения, дающие средний уровень ниже первого (ниже 335 баллов). Учащиеся этих образовательных учреждений не владеют на достаточном уровне основными познавательными умениями, необходимыми для получения образования. К таким учреждениям, как правило, относятся основные (9-летние) школы, расположенные в сельской местности, и образовательные учреждения начального профессионального образования. .."
на том же сайте есть примеры заданий на русском (ZIP/MS Word с картинками и frames)
А в приведенной ссылке есть фраза:
"...Эта задача прекрасно иллюстрирует порочность системы тестирования с выбором ответа. Очевидная стратегия решения таких тестов – отбросить наименее правдоподобные ответы и объявить истиной то, что осталось..."
+
"..Академик Владимир Арнольд однажды спросил знакомого американского физика, как он ухитряется хорошо сдавать американские тесты. Тот ответил, что, по-видимому, у него выработалось адекватное представление об уровне глупости их авторов..."
что вообщем-то многое объясняет. И не только на примере этих тестов. Можно про Cisco тесты вспомнить ;)
По поводу - надо ли тут копья ломать - а смысл?
А всем, кто этой темой интересуется - настоятельно совутую почитать:
http://lib.ru/ANEKDOTY/FEINMAN/feinman.txt
и прикольно, и полезно. Там про учебники для школ и ВУЗ-ы Бразилии прикольно расписано :)
Re: Malx
Date: 2006-02-07 09:14 pm (UTC)Это ж-ж-ж неспроста.
P.S. Зарегистрировался ты бы:) Хоть комменты увидишь:)
Malx
Date: 2006-02-12 05:18 pm (UTC)Или ты про notify by mail on reply ?
Re: Malx
Date: 2006-02-12 05:49 pm (UTC)Хотя есть и другие потенциальные полезности.
no subject
Date: 2006-02-06 09:00 am (UTC)это умение нарабатывается в агрессивной окружающей среде, и никак иначе.
в 15 лет это можно получить только на улице, и то - мне такие не встречались.
к вопросу об альтернативных вариантах подачи статистики.