Читать книгу Как использовать анализ данных о добавленной стоимости для улучшения обучения школьников: руководство для школ и лидеров школьных округов - Кейт Кеннеди - Страница 15

Что говорят преподаватели об анализе данных о добавленной стоимости? Вот некоторые из множества комментариев, которые мы получили от учителей и директоров учебных заведений за многие годы:

• «Анализ данных о добавленной стоимости – чрезвычайно мощный инструмент для определения того, насколько мы эффективны или неэффективны в наших усилиях по улучшению процесса научения учеников».

• «Анализ данных о добавленной стоимости помогает нам увидеть прогресс учеников, он является реальной силой перемен к лучшему».

• «Анализ данных о добавленной стоимости – это эффективный инструмент для учителей и руководителей учебных заведений, чтобы продемонстрировать, насколько успешны их ученики в достижении поставленных перед ними целей. Учителя действительно могут использовать эту информацию для рефлексии относительно результатов своей деятельности».

Итак, что же это за инструмент, который так много преподавателей находит полезным? Во-первых, понятие добавленной стоимости не ново, и образование – не единственная сфера его применения. Первоначально оно возникло в экономической теории и обозначало то, что добавляется в процессе обработки сырья и материалов и превращении его в готовый продукт. С тех пор этот термин имеет в виду любой выпущенный продукт (output, выпуск), и сегодня он подразумевает стоимость, которая превышает суммарную стоимость ресурсов (input, затраты), использованных на изготовление этого продукта. Например, в маркетинге добавленная стоимость означает формирование дополнительного спроса на некий продукт и, как следствие, рост рыночной цены этого продукта; в инженерном деле добавленная стоимость указывает на повышение эффективности конкретного процесса; в сфере оказания юридических услуг понятие добавленной стоимости отсылает нас к «выигрышным» юридическим стратегиям.

В контексте образования анализ данных о добавленной стоимости – это измерение прогресса, которым оценивается влияние учителей, школ и школьных округов на академический перформанс[1] учеников. Для проведения этого анализа используются результаты проверочных тестов учащихся целых штатов.

Анализ данных о добавленной стоимости – это система измерения прогресса, который учителя, школы и школьные округа добавили к академической успеваемости учеников.

Говоря проще, добавленная стоимость – это разница между начальной успеваемостью ученика (результатами тестов прошлого года) и его текущей успеваемостью (результатами тестов года проведения проверки). Это наблюдение за изменениями успеваемости можно сравнить с динамикой физического развития ребенка, которая фиксируется в педиатрической карте его роста. Нам известно, что наблюдение за уровнем успеваемости учащихся для вас не является новостью. Действительно, существует множество формальных и неформальных способов оценивать перформанс учеников в ходе обучения в школе. Работая учителем, одна из авторов этой книги использовала в классе диагностические тесты – в начале, середине и в конце учебного года, – чтобы следить за изменением качества понимания учениками прочитанных текстов. Она составляла графики прогресса для каждого учащегося и использовала их для постановки новых целей вместе с учениками. Многие деятели школ, с которыми мы работаем, не тратили много времени на то, чтобы в начале каждого учебного года заносить результаты тестов учащихся штатов в сводные таблицы для определения их успехов от года к году. Это простой и наглядный способ слежения за успеваемостью и ее динамикой, но, несмотря на его действенность, у него есть ограничения.

Необходимо пояснить: анализ данных о добавленной стоимости – это не просто разница между результатами стартового и последующих тестов. Для создания надежных и наглядных систем контроля прогресса учащихся используется сложная техника статистического моделирования. Ее продолжительное успешное применение помогло сделать сегодня информацию о добавленной стоимости статистически достоверной. эта техника включает:

• современные вычислительные возможности, позволяющие обрабатывать и анализировать данные о достижениях учащихся;

• постоянные циклы тестирования, из года в год дающие информацию для сравнения академических показателей;

• доступность баз данных длительного наблюдения, в которых хранятся истории результатов тестов учеников;

• применение подходящих статистических инструментов, которые делают возможным интерактивное представление данных.

В результате анализ данных о добавленной стоимости стал незаменимым инструментом для описания и изучения прогресса учащихся. Это новый подход для измерения того, как обучение воздействует на научение. Он является наиболее точным и надежным способом слежения за ростом успехов учеников.

Анализ данных о добавленной стоимости – это новый подход, позволяющий оценить влияние методов преподавания на результаты научения и предоставляющий более точные и надежные способы наблюдения за динамикой.

Это многообещающее достижение важно сразу с нескольких точек зрения. Теперь преподавателям доступна точная информация не только о прогрессе отдельных учащихся, но и о степени влияния на этот прогресс конкретных учителей, школ и школьных округов. Благодаря информации о добавленной стоимости преподаватели могут измерить вклад их учебных программ в достижения каждого ученика. Теперь учителя могут определять, насколько успешно работают их обучающие программы, для кого больше подходят их стратегии обучения и что следует изменить. Кроме того, теперь мы можем признать и оценить заслуги учителей, которые создают образовательную среду, где успешны все ученики независимо от их начального уровня.

Школьные округа, предоставляющие общедоступную информацию о добавленной стоимости своему населению, могут обеспечить данные о школьных успехах учеников, в то время как раньше родители могли получать лишь информацию о процентной доле учеников округа, успешно сдавших ключевые экзамены. Некоторые школы, несмотря на провал в освоении стандартов успешности, полагают, что они вносят значительный вклад в академический прогресс, когда они анализируют информацию о добавленной стоимости. Данных для этого предостаточно. На самом деле преподаватели имеют доступ к огромным массивам данных и обзорам о прогрессе, которые существенно значимы для принятия решительных и информативно оправданных действий.

В некоторых случаях преподаватели жалуются на невозможность обработать виртуальное море данных и определить, какие из этих данных наиболее важны с точки зрения усилий по улучшению школьных дел. Как отметил для нас директор одной из школ штата Теннесси, «те, кто считают добавленную стоимость лишь еще одним из множества показателей, упускают важную возможность». Мы согласны с этим и поддерживаем мнение о том, что анализ данных о добавленной стоимости дает учителям и заведующим учебными процессами информацию, необходимую для выявления и ранжирования слабых и сильных сторон их работы. Хотя ни один вид информации сам по себе не может служить ключом к улучшению результатов, но мы уверены, что изучение данных о добавленной стоимости заслуживает вашего внимания.

Добавленная стоимость: для преподавателей это слишком сложно!

Кто-то считает, что анализ данных о добавленной стоимости слишком сложен для понимания преподавателей, и поэтому его не стоит использовать. Нельзя не признать, что статистические методы, которые применяются для подсчета добавленной стоимости, действительно сложны. Тем не менее мы утверждаем, что процесс интерпретации и использования информации о добавленной стоимости не является сложным. Вот некоторые из сложных вещей, которые мы используем и на которые полагаемся каждый день:

• Электронные часы. Вы ежедневно носите их на руке и доверяете цифрам, которые они вам показывают, но вы не знаете, как сделать электронные часы (по крайней мере мы этого не знаем).

• Демографический анализ. Мы ничего не понимаем в таблицах, которые используют специалисты по оценке страховых убытков, но мы доверяем страховым агентам, которые рассчитывают по этим таблицам параметры нашей страховки.

• Гибридные автомобили. Toyota Prius бесшумно мчатся по шоссе, тратя меньше трех литров бензина на 100 км пути. Нас впечатляют технологии, которые за этим стоят, и нам нравится экономить топливо, но мы совершенно не понимаем, как устроен двигатель этой машины.

История двух учениц: Янира и Элли

Чтобы проиллюстрировать некоторые аспекты анализа данных о добавленной стоимости, приведем истории двух учениц – Яниры и Элли. Янира – ученица 5-го класса начальной школы Alamos в центральной части Лос-Анджелеса, штат Калифорния. Можно сказать, все ученики этой школы (99 %) относятся к малоимущим слоям населения. В классе Яниры результаты тестов успеваемости по штату Калифорния очень низки и находятся в диапазоне от 4 до 50 процентилей. Штат Калифорния требует, чтобы 75 % всех учащихся получили удовлетворительные результаты. Но в начале периода наблюдения уровень всех учеников класса Яниры был далек от удовлетворительного. Иными словами, все ученики из класса Яниры весьма далеки от успешного уровня.

Класс Яниры и вся ее школа со стороны выглядят сборищем неудачников – ведь каждый ученик в ее классе по успеваемости находится ниже удовлетворительного уровня. Однако учитель Яниры прилагает все усилия, чтобы поднять уровень успеваемости детей и ему известно, что всего за год девочка добилась огромного прогресса. Проведенные в классе контрольные работы показали, что в начале учебного года Янира умела читать на уровне 2-го класса, а в конце – на уровне 5-го. То есть за один год учебы она выросла в своем умении читать на целых три класса! Тем не менее при прохождении теста успеваемости на уровне штата результат Яниры составил 49 процентилей. Это хороший результат по сравнению с ее оценкой в начале года – 29 процентилей – но даже при таком росте показателя она не смогла получить удовлетворительную оценку за тест по успеваемости от штата Калифорния. В традиционной системе учета успеваемости, учитывающей лишь проходные баллы, Янира, ее учителя и ее школа потерпели неудачу.

Элли живет в другой части Лос-Анджелеса и ходит в начальную школу Bethany. В этой школе лишь 20 % детей относятся к малообеспеченным слоям населения. У учеников 5-го класса, в котором учится Элли, результаты теста успеваемости от штата в начале года находились в диапазоне от 50 до 95 процентилей. Элли начала год с 88 процентилей, в конце года в ходе тестирования ее результат соответствовал лишь 80 процентилям. обе оценки считаются удовлетворительными. Школа преодолела установленную штатом планку – более 78 % ее учащихся успешно прошли тест, однако этот показатель оказался ниже уровня прошлого года, когда удовлетворительные оценки получили 80 % учеников школы. Учителя этой школы работают над тем, чтобы поднять или удержать уровень успеваемости своих учащихся. Несмотря на то что уровень успеваемости Элли упал с 88 до 80 процентилей, ее результат все равно оказался выше минимального удовлетворительного уровня. Выходит, что формально начальная школа Bethany и преподаватель класса Элли достигли успеха.

Модель роста AYP (Adequate Yearly Progress)[2]

Еще один подход к измерению прогресса состоит в прогнозировании будущего прогресса учеников на основании их индивидуальной истории успеваемости. В Соединенных Штатах по состоянию на 2005 г. моделирование роста служит дополнительным способом понять, добивается ли та или иная школа надлежащего ежегодного прогресса – AYP.

В пилотном федеральном проекте по использованию моделирования роста для соответствия требованиям AYP приняли участие 15 штатов, после чего к участию были приглашены и остальные штаты. В большинстве штатов применяется модель прогнозирования роста, которая помогает школам добиться соответствия требованиям надлежащего ежегодного прогресса (AYP), если их ученики по прогнозам должны достичь удовлетворительного уровня успеваемости.

Например, в Огайо многие школы успешно применяют модель прогнозирования роста. Измерение роста применяется к каждой подгруппе, которая не достигла уровня AYP с учетом «зоны безопасности»[3] и средних показателей за два года. На этом этапе концепция измерения роста применяется для расчета доли учеников, которые постоянно улучшают свои результаты и движутся к стандарту AYP. В этой доле учитываются учащиеся, которые с вероятностью более 50 % в будущем достигнут успеваемости, удовлетворяющей нормативам надлежащего годового прогресса. Вероятность будущего соответствия этим нормативам оценивается на основании двухлетних прогнозов, сделанных для школ, в которые входят 4–8 классы.