Д-р Рассел Т. Уорн (@ Russwarne)
Прошлой весной более 4 миллионов учеников средней школы прошли более 2 миллионов тестов с расширенным размещением (AP). Спонсируемый колледжским советом, курсы AP преподаются преподавателями средней школы и позволяют студентам зарабатывать кредит в колледже, сдавая тест в конце учебного года. Согласно совету колледжа, студенты курсов AP изучают больше материалов, более подготовлены к учебе и заканчивают степень бакалавра ранее, чем студенты, не участвующие в AP.
И все же есть две причины, которые делают слишком упрощенным, чтобы просто заявить, что программа AP приводит к академическим преимуществам. Во-первых, программа AP, как и многие образовательные программы, имеет множество компонентов, и часто бывает трудно сказать, какие из них приводят к академическим преимуществам. Во-вторых, учащиеся часто выбирают, следует ли проходить курсы AP, а ученики AP часто отличаются от студентов, не участвующих в AP, важными способами. Это смешивает влияние программы с ранее существовавшими различиями между двумя группами студентов. Недавнее исследование, проведенное моей исследовательской группой (Warne, Larsen, Anderson, & Odasso, в прессе), хорошо иллюстрирует оба пункта.
Множество «движущихся частей»
Образовательные программы редко бывают простыми. Они часто включают в себя множество «движущихся частей», каждый из которых вносит вклад в программу в целом. Исследователям может быть сложно определить, какие компоненты образовательной программы эффективны для увеличения обучения и которые не важны. Например, в программе AP есть 34 теста, которые охватывают темы колледжа, начиная от английского языка, до статистики, теории музыки, до мировой истории. Каждая из этих тем имеет учебный план и стандартизованный тест AP, и в каждом классе есть учитель, который создает задания, разрабатывает тесты и готовит студентов к тесту. Школьные, районные и государственные характеристики также могут способствовать тому, как функционирует программа.
В нашем исследовании программы AP мои соавторы и я решили изолировать один компонент программы AP: тест. Мы хотели выяснить, просто ли зачисление в класс AP привело к академической успеваемости для студентов или было необходимо, чтобы учащиеся проходили тест AP. Для этого мы использовали набор данных с более чем 90 000 учеников средней школы, и мы разделили учащихся на четыре группы: (а) студенты, не участвующие в AP, (b) ученики AP, которые не принимали AP-тест, (c) AP, которые прошли тест, но не прошли, и (d) ученики AP, которые приняли и прошли тест AP.
Мы сравнили баллы ACT из четырех групп студентов. Если сам класс был активным компонентом, то должна быть разница в оценках ACT между группами (a) и (b). Если тест был активным компонентом, то группа (c) должна иметь более высокий показатель ACT, чем группа (b). Мы обнаружили, что средние баллы ACT составляли 21,0 для группы (a), 21,3 для группы (b), 22,5 для группы (c) и 26,5 для группы (d). Результаты показывают, что зачисление в класс AP дает студентам небольшое преимущество (0,3 балла по 36-балльной ставке ACT), но при проведении теста вы получаете больше преимуществ (1,2 балла).
Предварительно существующие различия учащихся
На первый взгляд, результаты предыдущего параграфа, по-видимому, указывают на то, что и класс, и тест эффективны, хотя тест явно оказывает более сильное влияние. Но проблема такого сравнения заключается в том, что эти четыре группы студентов не эквивалентны, потому что студенты выбирают, поступать ли на курсы AP. Таким образом, студенты AP отличаются от студентов, не участвующих в AP (Sadler & Sonnert, 2010). Психологи называют этот самоотбор, и это очень часто встречается во многих областях психологических исследований. Фактически, есть два уровня самоотбора, которые исследователи должны учитывать при изучении AP-программы, потому что ученики AP также имеют возможность пройти тест. Причины самоотбора в AP-программу или для проведения теста AP часто неясны, но административные политики (например, решение штата заплатить плату за участие в программе для студентов или решение школы предложить определенный класс AP) и характеристики ученика ( например, как подготовлен студент для теста), кажется, имеет значение.
Чтобы справиться с самовыборкой, необходимо контролировать существующие ранее различия учащихся. Предыдущие исследователи (например, Long, Conger, & Iatarola, 2012; Sadler & Sonnert, 2010) контролировали переменные, в которых группы студентов различаются. Например, ученики AP, как правило, имеют более высокие средние показатели средней школы (GPA), часто более мотивированные и менее склонны к доходам из домов с низким доходом. Без контроля над такими переменными влияние программы AP было бы смешано с различиями между студенческими группами.
В нашем исследовании мы контролировали около 70 переменных учащихся, включая секс, расовую / этническую группу, средний балл, академические баллы за успеваемость, и был ли ребенок в специальном образовании. Затем мы сравнили баллы ACT четырех групп после внесения этих статистических корректировок. У студентов, не участвовавших в AP, средний показатель ACT составлял 21,4. Студенты AP, которые не принимали AP-тест, имели средний показатель ACT 21,2. Студенты AP, которые не прошли тест AP, имели средний показатель ACT 21,7. Наконец, ученики AP, прошедшие тест AP, имели средний балл ACT, равный 24,6.
Сравнение этих результатов с нескорректированными результатами показывает важность внесения этих корректировок. Преимущество использования класса AP испаряется (как показано в разнице баллов между двумя первыми группами), а влияние сдачи теста падает с 1,2 пункта до 0,5 пункта – более 50%. Не контролируя ранее существовавшие различия, программа AP выглядит намного эффективнее, чем она есть на самом деле. В конце концов, мои соавторы и я достигли того, что тест AP является важным компонентом программы AP. Кроме того, учащиеся, которые проходят тест, получают больше преимуществ, чем их одноклассники, которые не принимают AP-тест, или кто проходит тест и не пропускает его.
Вывод
Это исследование является примером проблем оценки и понимания образовательных программ. Многие компоненты некоторых образовательных программ и ранее существовавшие различия между группами студентов представляют проблемы для психологов-педагогов. Но проблемы не являются непреодолимыми. Я предлагаю читателям изучить оригинальную статью или посмотреть видео, которое я сделал об исследовании. Оба доступны (бесплатно) по следующим URL-адресам:
Полная статья: http://www.tandfonline.com/doi/pdf/10.1080/00220671.2014.917253
Сводка видео: https://www.youtube.com/watch?v=aViwSlcu2F0
Рекомендации
Sadler, PM, & Sonnert, G. (2010). Средняя школа Адаптированное помещение и успех в курсе колледжа в области наук. В ПМ Сэдлер, Г. Соннерт, Р. Х. Тай и К. Клопфенштейн (Ред.), А. П.: Критическое исследование Программы расширенного размещения (стр. 119-137). Кембридж, Массачусетс: Гарвардская образовательная пресса.
Long, MC, Conger, D., & Iatarola, P. (2012). Влияние школьного курса на вторичный и послесудебный успех. American Educational Research Journal, 49, 285-322. DOI: 10,3102 / 0002831211431952
Warne, RT, Larsen, R., Anderson, B., & Johnson, AO (в печати). Влияние участия в программе расширенного размещения на вступительные экзамены студентов в колледж. Журнал образовательных исследований. DOI: 10,1080 / 00220671.2014.917253
