7) Pisa Мониторинг оценки качества образования в школе pisa

PISA - мониторинг оценки качества образования  в школе, проводимый Организацией Экономического Сотрудничества и Развития (OECD).  PISA: мониторинг оценки качества образования в школе

Мониторинг оценки качества образования в школе PISA(Programme for International Student Assessment) организуется и проводится ОЭСР с 2000 года. Результаты публикуются раз в три года.

Цель мониторинга качества образования в школе 

Цель мониторинга качества образования в школе PISA - оценка способности применять в реальной жизни знания, полученные за школьной скамьей. Объект исследования - образовательные достижения учащихся 15-летнего возраста. В большинстве стран в этом возрасте заканчивается  обязательное школьное обучение, а национальные программы обязательного среднего образования еще не так сильно различаются, как в старших классах.  Первая ступень образования особенно важна: ведь это фундамент всего образовательного процесса, который в нашем мире происходит всю жизнь. Если в ребенке заложена или воспитана способность самостоятельно приобретать знания, необходимые для успеха в обществе, то все остальное приложится.  Критики мониторинга качества образования в школе PISA (понятное дело, все они граждане тех стран, в которых по результатам PISA с образовательными достижениями далеко не все в порядке), не считают данное исследование объективным. Их главный аргумент:  PISA оценивает не уровень освоения школьной программы, а скорее возможность школьников руководствоваться здравым смыслом и логикой. Но простите, разве это не то, зачем мы отправляем наших детей в школу? Вряд ли в будущей жизни они будут сталкиваться с задачами, сформулированными в школьных учебниках: они должны будут применять полученные знания в решении нестандартных вопросов. Только так можно добиться успеха, а вовсе не щелкая по трафарету одинаковые задачки из учебника.   Конечно, школа должна давать  определенный набор правил языка, исторических фактов, физических законов, математических формул и так далее. Но хорошая школа должна привить навыки решения  реальных жизненных проблем и самостоятельной работы с информацией. Это называется «функциональной грамотностью», и именно эта самая функциональная грамотность является объектом мониторинга качества образования в школе  Programme for International Student Assessment (PISA).  PISA – уникальный мониторинг оценки качества образования в школе, фиксирующий не только результаты усвоения учебного материала, но и умение использовать полученные навыки и знания в решении жизненных проблем. Именно это определяет  актуальность  мониторинга не только для совершенствования школьного обучения, но и для формирования компетентностного подхода в высшем образовании. Сегодня мало просто знать факты и правила. В современном мире нужно еще уметь их использовать, например, для того, чтобы сформулировать свою точку зрения в споре о генетически измененных продуктах или оценить газетную статью о глобальном потеплении.  Методология мониторинга качества образования в школе 

Мониторинг качества образования в школе PISA проводится по трем основным направлениям:  грамотность чтения,

математическая грамотность, 

естественнонаучная грамотность.

С 2003 года было введено еще одно направление - способность решать различные проблемы.

В 2000 году наиболее глубоко исследуемым было направление грамотности чтения, в 2003 - математическое, в 2006 - естественно-научное.  Основное внимание при проведении мониторинга качества образования в школе уделяется оценке овладения учащимися общеучебными и интеллектуальными навыками. Для проверки математической грамотности, грамотности чтения, естественнонаучной грамотности и умения решать проблемы разрабатываются комплексные или структурированные задания. Каждое из заданий включает отдельный текст, в котором описывается некоторая проблема, и 1-6 вопросов к нему различной трудности. По результатам выполнения заданий оценивается способность учащихся выявить проблему в тексте и решить ее, применив знания из той или иной предметной области.  Математическая грамотность - степень способности определять и понимать роль математики в окружающем мире, высказывать хорошо обоснованные математические суждения и использовать математику в целях удовлетворения  потребностей, присущих созидательному, заинтересованному и мыслящему человеку.  Естественнонаучная грамотность – степень способности использовать естественно-научные знания, выявлять проблемы и делать обоснованные выводы, необходимые для понимания окружающего мира и тех изменений, которые вносит в него деятельность человека, и для принятия соответствующих решений.     Грамотность чтения - степень способности к осмыслению письменных текстов и рефлексии на них, к использованию их содержания для достижения собственных целей, развития знаний и возможностей, для активного участия в жизни общества.  Оценивается не техника чтения и буквальное понимание текста, а понимание и рефлексия на текст, использование прочитанного для различных целей.  Компетентность в решении проблем – способность использовать познавательные умения для решения межпредметных реальных проблем, в которых способ решения с первого взгляда явно не определяется.  В тестах используются вопросы разного типа. Около половины - вопросы, предполагающие  свободные ответы,. В 12% вопросов необходимо самостоятельно сконструировать свой ответ, но этот ответ ограничен отдельными словами или числами. Вопросы с готовыми вариантами ответов составляют примерно треть.  Всего в международном мониторинге оценки качества образования в школе использовались 54 задания по математике (всего 85 вопросов), 8 заданий по чтению (всего 28 вопросов), 13 заданий по естествознанию (всего 35 вопросов) и 10 заданий по решению проблем (всего 19 вопросов).  Каждый ученик должен  ответить на них за 2 часа письменно. После выполнения теста  каждый ученик заполняет в течение получаса анкету, в которой описывает свое образовательное учреждение, семью, свои интересы и отношение учебе. Дополнительно проводится анкетирование директоров образовательных учреждений.  Мониторинг оценки качества образования в школе проводится в строгом соответствии с едиными инструкциями и правилами, разработанными международным координационным центром для стандартизации проведения мониторинга во всех странах-участницах проекта. Каждый этап мониторинга качества образования (формирование выборки, перевод и адаптация инструментария, проведение тестирования и анкетирования, проверка и обработка данных) контролируется международными экспертами. Например, переводы тестов и анкет перепроверяются переводчиками международного класса. Во время проведения тестирования в отдельных образовательных учреждениях присутствуют наблюдатели. Выполнение заданий со свободными развернутыми ответами проверяется опытными учителями, а затем часть работ (каждая четвертая ) перепроверяется другими. Определенная часть проверяется международными экспертами. Задания, по которым эксперты в странах-участницах дали несогласованные оценки, исключаются из анализа. 8) Во всем мире растет заинтересованность в подготовке хороших учителей, привлечении их к работе на длительное время, профессиональном развитии и мотивации труда преподавателей. Установлено, что достижения учащихся имеют тесную связь с характером и качеством происходящих в классе процессов, прежде всего – с деятельностью учителя [1]. Недавние исследования показали, что профессиональные качества преподавателя являются главным фактором, определяющим достижения учащихся на уровне школы, и что высококачественное обучение в течение нескольких лет может ликвидировать сложившийся дефицит знаний у слабоуспевающих учащихся [2].

Однако построение правильной политики работы с учителями, которая обеспечивала бы приход в каждый класс компетентного, пользующегося поддержкой и мотивированного учителя, остается проблемой. Это связано прежде всего с нехваткой информации о том, какие политические и управленческие решения и в каких сферах могут оказаться наиболее результативными в конкретных национальных и местных условиях.

 

Устранить дефицит информации, расширить поле понимания процессов, происходящих в образовании, в том числе касающихся кадрового потенциала образования, должны широкомасштабные международные исследования учительского корпуса, в которые Россия все более активно включается (к числу таких исследований в том числе относятся: «Системный подход к улучшению результатов образования» (System Assessment and Benchmarking forEducation Results, SABER), «Педагогическое образование и совершенствование изучения математики» (Teacher Education and Development Study inMathematics, TEDS-M), «Исследование представлений и установок учителей математики об обучении математике в основной школе» (Nordic-Balticcomparative research in mathematics education, NorBA).

 

Описание и цели исследования

Международное исследование систем преподавания и обучения (Teaching and Learning International Survey, TALIS), проводимое ОЭСР, – это первое международное сравнительное исследование, сфокусированное на том, в каких условиях работают учителя и какая учебная среда существует в школах. Его цель – помочь странам определить и развивать политику, которая поддерживает условия, обеспечивающие эффективность школьных процессов.

 Задачи исследования – предоставить полезные для принятия политических решений данные и провести анализ по следующим ключевым аспектам школьной деятельности:

 1. Роль и функционирование школьного управления. 

• 2. Оценка работы учителей и получение ими обратной связи.

• 3. Профессиональное развитие учителей.

• 4. Установки и взгляды учителей по поводу преподавания и педагогических практик.

 Исходя из важности роли лидерства в обеспечении школьной эффективности, TALIS включает в том числе анализ роли школьного руководства и той поддержки, которую директора оказывают учителям. Поскольку удержание, мотивирование и повышение квалификации эффективных учителей являются приоритетами любой школьной системы, проект направлен на исследование восприятия, оценки и вознаграждения преподавателей, а также на анализ того, насколько хорошо удовлетворяются их профессиональные ожидания и потребности профессионального развития. Наконец, TALISпозволяет проникнуть в область отношений и установок учителей по поводу преподавания, с которыми они приходят в класс, в том числе по поводу педагогических практик, которым они следуют.

 Идея проекта TALIS была инициирована в рамках программы ОЭСР «Индикаторы образовательных систем» (IndicatorsofEducationSystems, INES). В течение последних 20 лет этот проект разрабатывал согласованный набор индикаторов, которые обеспечивают надежную базу для количественных сравнений функционирования и успешности систем образования стран-членов и партнеров ОЭСР. Основной продукт проекта INES – это ежегодный обзорEducationataGlance, который готовит ОЭСР. Другим источником нового исследования стал обзор ОЭСР Teachers Matter: Attracting, Developing and Retaining EffectiveTeachers(OECD, 2005), в котором была подчеркнута потребность в более качественной информации об учителях на национальном и международном уровнях. Рамка описания образовательной политики, использованная в этом обзоре, была учтена при разработке TALIS.

 В последнее время эксперты программы INES выступают с инициативами обеспечения большей синергии различных сопоставительных исследований, проводимых ОЭСР – прежде всего PISA и TALIS. Исследователи выступают за продвижение в направлении большей согласованности измерений в рамках данных проектов, а также за необходимость создания общей экспертной группы по разработке исследовательского инструментария, возможность согласования цикличности проведения исследований в рамках двух проектов.

 В качестве базовых принципов исследования TALIS выделены:

 Политическая целесообразность. Ясность в анализе политики и фокус на вопросах, которые для стран-участниц наиболее существенны.

• Добавленная стоимость. Международные сравнения могут быть важным источником полезных сведений и новых.

• Ориентация на индикаторы. Результаты исследования дают информацию, которая может быть использована для совершенствования системы индикаторов.

• Валидность, надежность, сравнимость, четкость. На основании четких данных исследование предоставляет валидную и надежную информацию, сопоставимую для всех стран-участниц.

• Интерпретируемость. Страны-участницы могут содержательно интерпретировать результаты.

• Эффективность и экономическая оправданность. Своевременность и экономическая эффективность проводимой работы.

 TALIS – это результат совместных усилий стран – членов ОЭСР и партнерских стран, разрабатывавших концепцию исследования. Первый раунд исследования состоялся в 2007–2008 годах. Второй рассчитан на в 2013–2015 годы.

 Дизайн исследования

Целевая группа исследования – учителя средней общеобразовательной школы и их директора.

 Размер выборки – 200 школ в каждой стране, 20 учителей в каждой школе.

 Школьная выборка – репрезентативная выборка школ и учителей внутри школ.

 Заданный уровень заполняемости анкет – 75% от выборки школ (школа считается ответившей, если 50% от выбранных учителей ответили), с ориентировкой на то, чтобы 75% от всей выборки учителей в стране заполнили анкеты.

 Способ сбора данных – анкеты в бумажном или онлайн-варианте.

 На первом этапе исследования в каждой из 23 стран-участниц были выбраны случайным распределением 200 школ, которые участвовали в анкетировании. В каждой школе на вопросы анкеты отвечали директор и 20 учителей, которые были выбраны также в случайном порядке. Анкетирование проводилось как в бумажном варианте, так и онлайн, оно продолжалось 45 минут. В целом исследование TALIS охватило 90 000 учителей, представляющих более 2 млн учителей стран-участниц.

 К настоящему времени число стран-участниц расширилось – их больше тридцати. Кроме того, некоторым странам, в том числе России, была предоставлена возможность присоединиться ко второй волне исследования и использовать его методологию в соответствии с международными стандартами.

ОЭСР установила высокие требования к выборке, которая превысила те, что раньше достигались при опросах учителей, чтобы обеспечить репрезентативность. Тем не менее не во всех странах-участницах выборки соответствовали установленному стандарту. Это потребовало особенной осторожности при анализе данных.

 В анкетном опросе 2008 года участвовали учителя, преподающие на средней ступени как государственных, так и частных школ. Анкетирование, проводившееся в 23 странах (Австралии, Австрии, Бельгии, Бразилии, Болгарии, Дании, Венгрии, Исландии, Испании, Ирландии, Италии, Корее, Латвии, Малайзии, Мальте, Мексике, Норвегии, Польше, Португалии, Словакии, Словении, Турции, Эстонии) на репрезентативной выборке, обеспечило богатую базу данных. Данные охватывали разные аспекты деятельности учителей, но анализ был сфокусирован на следующих основных сферах:

 Установки учителей.

• Правила и практики.

• Оценка учителей и обратная связь.

• Школьное лидерство [3].

 Еще одной важной темой исследования было выбрано профессиональное развитие, поскольку оно усиливает все вышеперечисленные сферы.

 В анкетах затрагиваются также и другие темы, которые так или иначе связаны с основными, – они имеют и являются ценным дополнением, важным для анализа. Это такие блоки анкет, как «Школьный климат», «Рабочее время», «Удовлетворенность работой».

 Важно помнить, что TALIS собирает не нормативные либо административные данные, но отражает мнение учителей и директоров школ, отражая их взгляды, установки, самоотчеты, касающиеся преподавания и работы школ в целом. Это делает TALIS уникальным и чрезвычайно важным источником информации для принятия политических решений, повышения квалификации учителей и развития образовательных учреждений.

 Учитывая эту особенность исследования TALIS, целесообразно анализировать собранную информацию в комплексе с иными международными и национальными исследованиями, касающимися учительского корпуса и имеющими близкую направленность.

Прежде всего надо выделить международные сравнительные исследования SABER, TEDS-M, NorBA и проводимый в России Мониторинг экономики образования (МЭО). Существенным преимуществом России можно считать то, что она является участником всех перечисленных проектов и имеет уникальные возможности для аккумуляции максимальных объемов информации и их глубокого и разностороннего анализа.

 Таким образом, общая задача TALIS состоит в том, чтобы своевременно и экономически эффективно обеспечить четкие международные индикаторы и политически целесообразный анализ, касающийся преподавателей и их деятельности, которые помогут странам понять, каким образом проводить образовательную политику, создающую условия для эффективной деятельности школ. Межстрановой анализ позволяет государствам обмениваться опытом по решению близких проблем, изучать различные успешные национальные и институциональные стратегии и их влияние на учебную среду школ и эффективную работу учителей.