Роберт Е. Славин, Университет Джона Хопкинса
Когда вы больны, вы ищете лекарства и процедуры, которые были тщательно оценены?
Когда вы покупаете автомобиль, вы ожидаете, что его тщательно проверили на предмет безопасности?
Поддерживаете ли вы исследования в сельском хозяйстве, чтобы увеличить поставки и качество здоровой пищи для всего мира?
Почти все говорят, что они скорее получат проверенные медицинские услуги, покупают безопасные и эффективные продукты, путешествуют по безопасным поездам и самолетам и так далее. Доказательства играют центральную роль в сельском хозяйстве, где доказанные практики, семена, запасы и ветеринарная практика чрезвычайно повышают производительность труда, снижают затраты и улучшают доступ и качество продуктов питания во всем мире.
Тем не менее, в сфере образования доказательства на протяжении долгого времени играли минимальную роль на практике. Крем для акне подросток должен был доказать свою безопасность и эффективность. Так почему же его учебная программа по алгебре не изучена одинаково? Можно утверждать, что быстрые темпы прогресса в таких областях, как медицина, сельское хозяйство и технология, имеют много общего с уважением доказательств в этих областях, в то время как медленные темпы прогресса в образовании отражают противоположное.
Конечно, есть много исследований в области образования и педагогической психологии, и принципы, полученные в результате этого исследования, влияют на практику. Тем не менее исследования для поддержки (или опровержения) общих принципов практики, в то время как существенные, не помогают педагогам в выборе конкретных текстов, программ, программного обеспечения или методологий. До тех пор, пока исследование не будет напрямую поддерживать конкретные подходы, преподаватели, вероятно, будут выделять части тела полученных знаний, которые им нравятся, и игнорировать остальные. Это лучше, чем полностью игнорировать исследования, но это не приводит к постепенному принятию все более эффективных стратегий, равно как и норма в медицине, сельском хозяйстве, технологии и других областях, основанных на фактических данных.
В последние годы область образования стала охватывать более важную роль в доказательствах в образовательной практике и решениях. Это движение называется доказательной практикой или EBP. Брайан Кук недавно представил эту тему и определил некоторые ключевые термины. Мое намерение – сделать еще один шаг, обсудить, как основанная на фактических данных практика начинает трансформировать образовательную практику и педагогическую психологию, и как, как предлагает президент Карен Харрис, мы действительно можем «повлиять на образование до К до серого».
Что считается «Строгие исследования»?
Одним из ключевых требований доказательной практики является большой и надежный набор программ и практик с «строгими доказательствами эффективности». Под этим подразумевается это в разных обстоятельствах, но «золотой стандарт» доказательств для основанных на фактических данных практика – это рандомизированное клиническое испытание, или RCT (Shadish, Cook, & Campbell, 2002). В RCT учащимся, преподавателям или школам, которые соглашаются участвовать в эксперименте, назначают наугад, чтобы испытать данное лечение или выполнять функции контрольной группы (часто те, кто в контрольной группе получают лечение после окончания исследования ). Как правило, учащиеся в экспериментальной и контрольной группах проходят предварительную проверку до начала программы, а затем после тестирования один или несколько раз. Затем пост-тесты сравниваются статистически, контролируя предварительные испытания и, возможно, другие факторы.
Красота РКИ заключается в том, что из-за случайных распределений-экспериментальных и контрольных групп можно считать равными при предварительном тестировании не только на наблюдаемые факторы, такие как предварительные испытания, но и на ненаблюдаемые факторы, такие как мотивации или ориентации. Поэтому, если результаты значительно отличаются в конце эксперимента, разница должна быть обусловлена обработкой.
Прагматично, RCT может быть трудно реализовать. Часто бывает трудно заставить учеников, учителей и руководителей школ согласиться на случайное назначение. Поскольку учеников учат в школах и классах, трудно случайно назначать учеников в школах и классах, за исключением индивидуальных занятий, таких как репетиторство. Поэтому классы или школы часто случайным образом назначаются в так называемых кластерных рандомизированных исследованиях (ЭЛТ). Они сохраняют групповую основу обучения, но для таких экспериментов обычно требуется много школ – обычно около 25 на лечение – для методов, которые учитывают кластеризацию.
В исследованиях, основанных на знаниях, обычно используются приемлемые для научно обоснованных практик, например квази-эксперименты (КЭД), в которых экспериментальные и контрольные группы заранее согласовываются с такими факторами, как предварительные испытания и демография, а не случайным образом назначаются. Вариант этого – это то, что я называю рандомизированным квази-экспериментом (RQE), в котором группы случайным образом назначаются для лечения, но слишком мало групп, позволяющих использовать статистические данные, учитывающие кластеризацию.
Что касается исследований, отличных от РКИ?
Практика, основанная на фактических данных, оценивает все виды исследований: корреляционные, этнографические и описательные, а также экспериментальные. Его настойчивость в отношении РКИ применима только к вопросам «что работает». Например, если вы хотите знать, увеличивает ли научная программа научное достижение больше, чем обычная практика, необходим эксперимент. Однако для других вопросов предпочтительными могут быть другие методы. Многие РКИ также используют качественные методы для характеристики того, что делают экспериментальные и контрольные классы, и как ученики и учителя воспринимают лечение.
Добавление проверенных программ
Самый быстрый прогресс в реформе, основанной на фактических данных, включал разработку и оценку программ на всех уровнях образования, особенно до К до 12. При финансировании из Института педагогических наук (КЭС), Национального научного фонда (NSF) и другие агентства, многочисленные программы были поддержаны. В последние годы программа администрации Обамы по инвестициям в инновации (i3) инвестировала более 1,5 млрд. Долл. США в разработку, проверку и расширение проверенных программ. До настоящего времени было профинансировано 143 программы. В Великобритании Фонд пожертвований на образование (EEF) осуществляет аналогичные инвестиции.
Какие IES, NSF, i3 и EEF обнаруживают, что улучшить успехи учащихся не так просто, но это можно сделать. Большинство финансируемых программ не дают существенных различий, но меньшинства, которые имеют огромный потенциал для преобразования образовательной практики и политики, поскольку их результаты обычно получают в реальных школьных условиях и могут (в принципе) тиражироваться в широком смысле.
Подведение итогов
Чтобы сделать выводы о строгих исследованиях легко доступными и легко интерпретируемыми, важно иметь обзоры, в которых используются согласованные и справедливые стандарты для обобщения доказательств. В образовании Министерство образования США поддерживает Информационный центр «Что работает» (http://ies.ed.gov/NCEE/wwc). Наша группа в Университете Джона Хопкинса выпускает «Энциклопедию лучших доказательств» или BEE (www.bestevidence.org). Недавно Генеральный административный регламент Департамента образования (EDGAR) создал определения умеренных и убедительных доказательств эффективности образовательных программ.
Является ли практика, основанная на фактических данных, влияющей на образовательную политику и практику?
Практика, основанная на фактических данных, только начинает влиять на образовательную практику вне школ, участвующих в самом исследовании. Однако это может измениться.
Одной из областей воздействия является i3. Для того чтобы программы получали большие гранты по валидации и расширению, они должны продемонстрировать эффективность. В совокупности эти программы обслуживали тысячи школ.
Еще одной развивающейся областью воздействия являются федеральные гранты на улучшение школ (SIG), которые поддерживают преобразование школ с низкими уровнями исполнения в каждом штате. Недавнее законодательство определило новую категорию школ, которые могли бы выбрать: проверенные временем программы для всей школы. Будет интересно посмотреть, сколько школ делает этот выбор.
Поощрения использования проверенных программ проявляются во многих частях федерального законодательства. Например, в предложениях SEID Title II заявители должны показывать доказательства своих программ.
Политика может вмешиваться, но со временем кажется вероятным, что требования к доказательствам станут все более распространенными в федеральной, государственной и местной политике.
Как практика, основанная на фактических данных, влияет на педагогическую психологию?
Я считаю, что основанная на фактических данных практика будет очень хороша для всех образовательных исследований и образовательной психологии. Если это укрепится в политике и практике, это значительно повысит интерес к исследованиям со стороны преподавателей, политиков и спонсоров на всех уровнях. Сила доказательной практики в медицине не только увеличивает интерес и финансирование для РКИ, но также поддерживает широкий спектр исследований, используя всевозможные методы. То же самое может случиться и в образовании.
Образование – это прикладная область. Правительства, преподаватели и общественность заботятся об итогах обучения, и они гораздо более склонны заботиться о (и финансировать) исследования и разработки в области психологии образования, когда они могут видеть последствия для детей.
В образовательной психологии существует множество законных споров о методах исследования, мерах и целях исследований. Эти дебаты здоровы и необходимы. Однако, если вы придерживаетесь мнения, что цель педагогической психологии как дисциплины – это улучшение образования, особенно для детей, которым грозит риск, то практика, основанная на фактических данных, предлагает настоящую надежду сделать нашу область более эффективной для детей. Разве это не важно?
Этот пост является финалом специальной серии, внесенной в ответ на тему президентской темы 15-го ранга Карена Р. Харриса «Влияние образования до К-Грея». Президент Харрис подчеркнул важность воздействия на образование путем поддержания и обогащения способов, которыми Исследования в области педагогической психологии усиливают и влияют на образование в любом возрасте. Такое влияние зависит от рассмотрения конкурирующих точек зрения с продуманностью и уважением, что позволяет использовать совместную, кросс-междисциплинарную работу, которая использует то, что мы знаем с разных точек зрения. Она также утверждала, что нам нужно отбросить предубеждения парадигмы и отклонить ложные дихотомии, поскольку мы рассматриваем исследования для публикации или финансирования, разрабатываем следующее поколение исследователей, поддерживаем ранних исследователей карьеры и работаем друг с другом и с большей сферой.
Рекомендации
Shadish, WR, Cook, TD и Campbell, DT (2002). Экспериментальные и квази-экспериментальные конструкции для обобщенного причинного вывода. Бостон: Хаутон-Миффлин.
