В этом году Украина впервые примет участие в Программе международного оценивания учеников (PISA). Цель исследования — определить, насколько дети могут использовать школьные знания и умения в реальной жизни, то есть в условиях возможных трудностей и вызовов. Тестирование пройдет с 15 апреля по 26 мая. О том, как все будет, мы поговорили с национальным координатором PISA-2018 Татьяной Вакуленко.
О том, почему исследование PISA появилось именно сейчас
МОН находится в активной фазе реформирования системы образования, поэтому решение присоединиться к международным сравнительным исследованиям выглядит абсолютно логичным. Ведь очень сложно изнутри посмотреть на систему.
Исследование PISA основала Организация экономического сотрудничества и развития (OECD). Она стимулирует страны к участию. OECD нужен широкий круг охвата, потому что они хотят иметь обоснованные выводы об образовании в мире.
Украина была последней большой европейской страной, не принимавшей участия в исследовании, потому организаторы были очень рады приветствовать нас. Мы дополнили европейскую составляющую.
За участие в исследовании Украина платит в течение четырех лет (2016-2019) из государственного бюджета.
Стоимость включает две составляющие — плата за само участие, а также внутренние затраты на проведение тестирования. Это, например, подготовка к исследованию, печать материалов и т.д. За участие в цикле текущего года Украина заплатит 48 385 евро.
О том, что такое ведущая предметная область
В PISA всегда есть три основных области: чтение, математика и естественные науки.
Ведущая область в этом году — чтение. Это означает, что у всех учеников будут задания по чтению в их тестовых тетрадях.
Другие две области будут представлены вариативно: в зависимости от версий тетради ученики получат или задания по математике, или по естественным наукам, или сразу по двум этим областям.
У детей будут разные тестовые тетради (30 версий), что сделает невозможным списывание.
О том, как будут выбирать учеников для тестирования
Это будет независимая выборка. На основе данных об образовательных учреждениях Украины международное агентство WESTAT сформировало списки потенциальных участников выборки.
Эти учебные заведения подают нам перечень абсолютно всех учеников 2002 года рождения. Далее мы загружаем эти данные международным партнерам, а они выдают нам списки назад, где уже есть перечень школьников, которые будут проходить тестирование.
Это рандомизированный метод: чтобы не получилось так, что в выборку попадут только лучшие или худшие ученики.
Сегодня школы уже знают, что они, возможно, будут участвовать в исследовании. До 1 апреля будем знать точно учебные заведения и учеников.
Никаких замен учеников PISA не предусматривает. Ученик может пропустить тестирование в силу определенных обстоятельств (например, по болезни). Такой вариант, конечно, возможен, но это не может быть больше 15% от общего количества школьников, участвующих в исследовании.
В целом в программе примут участие около 6,5 тыс. учеников из всех регионов Украины.
О том, как будет проходить тестирование
В определенный день, который определят отдельным графиком, представитель нашей организации или института последипломного педагогического образования приедет в учебное заведение. У него с собой будут тестовые тетради и анкеты в защищенных пакетах. А учебное заведение обеспечит аудиторию.
Представители подготовят помещение: разложат тестовые тетради, проверят, чтобы все они были промаркированы. Затем дети займут свои места и в течение часа будут писать первую часть тестирования. Потом — перерыв 10 минут и вторая часть тестирования. Далее — снова перерыв и затем анкетирование.
Анкетирование — это опрос, помогающий изучить связь между тем, как ученики выполняют тестовые задания, и факторами, которые могут на это влиять. Например, социально-экономические условия жизни семьи ученика, отношение детей к обучению и т.п.
Это все происходит по международным требованиям. Процедура стандартная для всех стран, участвующих в исследовании.
После завершения тестирования все материалы снова упакуют и отправят в Украинский центр оценивания качества образования для дальнейшей обработки.
О результатах
Ни области, ни школы, ни ученики не смогут узнать свои результаты. Это общее условие, которое унифицирует участников по всей стране и позволяет определить уровень сформированности компетенций, а не конкретную мотивацию за оценку или еще что-то.
Мотивация — это часть грамотности. Если ученик мотивирован только обнародованием оценки — это плохой знак для системы образования.
Мотивированность и личное желание достичь большего, показать лучший результат, даже если он не будет освещаться на фоне других — показатель качества.
Мы работаем над тем, чтобы объяснить ученикам, для чего проводится исследование и что оно может положительно повлиять на развитие самой системы образования, будущее их товарищей.
Общие результаты для всех стран будут известны в декабре 2019 года.
О проверке тестирования
Ответы не проверяют, а кодируют. Потому что в PISA нет такого понятия, как правильный и неправильный ответ. Есть понятие «соответствие ответа определенному коду».
Кодировать будут украинские специалисты. Они проходят трехступенчатую подготовку и проверку международными партнерами.
О том, почему в Украине только бумажное тестирование
Стран с бумажным тестированием — восемь, а всего в исследовании учувствует 81 страна. Это политическое решение, которое было связано с несколькими факторами.
Во-первых, в Украине есть опыт бумажного оценивания и еще ни разу не было масштабного электронного оценивания.
Во-вторых, уровень компьютерной грамотности, я думаю, у нас недостаточно высок. А PISA предусматривает очень много заданий на печать текста, открытые ответы.
И если у учеников нет достаточного опыта работы с клавиатурой, это может значительно повлиять на результаты. Показать, например, не читательскую грамотность, а просто неспособность в короткие сроки напечатать ответ.
Это может действительно стать проблемой для учебных заведений в отдаленных районах, в сельской местности.
Следующий цикл в 2021 году почти на 100% будет компьютерным. Это будет большой challenge: посмотреть не только на грамотность, но и на компьютерный эффект — лучше или хуже будут результаты.
