У меня возникло ощущение, что, по его мнению, не существует практически ничего, что PISA не мог бы оценить. Если не сейчас, то когда-нибудь. Он даже настаивал, что PISA радикально отличается от всех других тестов, которые я когда-либо сдавала.
Мы пожали друг другу руки, и он пошел обратно – на следующее заседание. Уходя, я размышляла о том, что он сказал. Шляйхера, единственного из всех людей, нужно было понимать буквально. Если PISA действительно отличалась от всех тестов, которые я проходила, то существовал единственный способ узнать, прав ли он.
Мои оценки PISA
Я приехала туда рано и была, наверное, единственным человеком в истории, жаждущим пройти стандартизированный тест. У исследователей, проводивших PISA в США, был офис в даунтауне округа Колумбия, около Белого дома, зажатый между юридическими фирмами и лоббистами.
В лифте мне пришло в голову, что я 15 лет не сдавала тестов. Это могло усложнить дело. Я устроила себе короткую устную проверку. Формула извлечения квадратного корня? Величина π? И ничего не вспомнила. Двери лифта открылись.
Приятная молодая женщина, которой велели со мной нянчиться, провела меня в офис. Она положила на стол карандаш, калькулятор, буклет с тестом и вслух прочла официальные инструкции, объясняя, что PISA создан для того, чтобы выяснить, «чему вы учились и что такое для вас школа».
Следующие 2 часа я отвечала на 61 вопрос по математике, чтению и естествознанию. Поскольку определенные вопросы могли снова появиться в более поздних версиях теста, сотрудники PISA взяли с меня слово не рассказывать, что это за вопросы. Однако я могу поделиться похожими примерами из прошлых тестов PISA и другими примерными вопросами, которые PISA согласилась предать огласке. Вот, например, вопрос по математике.
Тележурналист указал на график и сказал:
– Этот график показывает огромный рост количества ограблений с 1998 по 1999 год.
Как вы думаете, верно ли журналист интерпретирует график? Обоснуйте свой ответ.
Еще в нескольких подобных вопросах требовалось высказать свое мнение, а дальше оставалось несколько строчек для ответа. Это было странно. С каких пор стандартизированные тесты интересуются чьим-то мнением?
Другие вопросы напомнили мне о задачах, с которыми я сталкивалась во взрослой жизни, вынужденная расшифровывать мелкий шрифт медицинской страховки, прежде чем ее выбрать, или сравнивая ставки по текущим счетам, предлагаемые конкурирующими банками. Это больше напоминало тест на умение жить, а не учиться.
Все математические формулы давались, слава богу, включая значение π. Но я заметила, что должна серьезно размышлять над ответами. Когда я попыталась побыстрее проскочить математический раздел, мне пришлось вернуться и стереть несколько ответов.
Один примерный вопрос на чтение представлял собой объявление о вакцинации в некоей компании – вежливое сообщение, которое можно увидеть на доске объявлений на работе. Листовка, написанная сотрудницей по имени Фиона, ничем не примечательная. Совершенно как настоящее объявление! Тест просит проанализировать работу Фионы:
Фиона хотела, чтобы стиль этого информационного листка был доброжелательным и воодушевляющим. Как вы считаете, удалось ли ей это? Поясните свой ответ, подробно комментируя расположение, стиль текста, картинки или другие графические данные.
Для меня самым сложным был раздел естествознания. Я не раз прибегала к догадкам. Многие вопросы были из области повседневной жизни. Что происходит с вашими мышцами, когда вы тренируетесь? В каких продуктах много витамина C?
Когда я закончила, у меня оставалось в запасе около 20 минут. В отличие от школьника, я сама оценивала собственные ответы. Это заняло около часа, поскольку каждый ответ мог получить оценку «0», полный или частичный зачет, в зависимости от того, насколько он близок к вариантам ключа теста. Хорошие тесты, как правило, хотя бы частично оценивались людьми, и это делало их дорогостоящими и редко используемыми.
За ответ на вопрос об ограблениях ставился полный зачет за любой вариант ответа из 10 возможных – но только если ответ был «нет» и включал критическую оценку искаженного графика, который начинается не с 0, или замечание, что повышение уровня грабежей было довольно маленьким в процентном отношении. (Кстати, только около трети участников в Финляндии, Корее и США правильно ответили на этот вопрос.)
Для вопроса об объявлении о прививках не было одного правильного ответа. Да или нет, но единственным способом получить полный зачет было защитить свое мнение, сославшись хотя бы на одну специфическую особенность листовки и дать ей подробную оценку. Просто повторить, что стиль текста «доброжелательный» и «воодушевляющий», было недостаточно: эти слова уже содержались в вопросе. «Интересная», «легко читаемая» и «понятная» рассматривались как слишком неопределенные. Оценка должна быть оригинальной, и требования были высокими. Во всем мире только 4 из 10 подростков правильно ответили на этот вопрос.