Проекты 2014 года
Руководители: М.Карной, И.Д. Фрумин
1. Сравнительное исследование готовности к обучению и качества подготовки студентов вузов в странах БРИК (Проект Супертест)
Цель исследования: проведение сравнительного исследования готовности студентов стран БРИК к обучению в вузе (в частности, студентов технических специальностей), а также качества их подготовки по истечении двух лет обучения в вузе. Целью исследования в 2014 г. являлась разработка инструментария для исследования качества подготовки по математике и физике студентов технических специальностей вузов России и Китая.
Для разработки инструментов оценивания применялся экспертно-ориентированный метод, который позволяет создавать тесты на основе существующих банков заданий. Задания для тестов были предоставлены странами участницами – Россией, Китаем и США. Все задания были переведены на английский, а впоследствии на языки стран. Работа с экспертами включала в себя два этапа. На первом этапе эксперты из России и Китая оценивали тематические области, которые могут быть включены в тест. Им предлагалось оценить, насколько важны данные тематические области для дисциплины в целом, для продолжения обучения и для работы по специальности. На втором этапе в соответствии с отобранными областями был составлен список заданий. Экспертам предлагалось оценить, насколько хорошо эти задания оценивают выбранную область. Таким образом, на основании оценок экспертов был сформирован набор заданий, который вошел в пилотную версию теста.
Результаты исследования:
1. Для студентов 1-го курса обучения разработан инструмент, позволяющий оценить уровень общих когнитивных навыков (по физике и математике), а также критическое мышление.
2. Для студентов 3-го года обучения разработан инструмент по этим же областям.
3. Разработаны контекстные опросники для студентов вузов, преподавателей и администрации.
2. Изучение связи между характеристиками школы, семьи и индивидуальными характеристиками учащихся старших классов и их академическими результатами и образовательными траекториями
Цели исследования: изучить подходы к определению социально-экономического статуса учеников или их семей, рассмотреть, как разница в подходах может отражаться на результатах исследований, выделить факторы, связанные с развитием позитивного отношения к математике и естественным наукам и оценить влияние сверстников на академические достижения и выбор образовательных траекторий
Результаты исследования:
Исследование первого вопроса показало, что используемые в социологии и экономике образования показатели СЭС семьи, несмотря на устоявшиеся концептуальную базу и набор индикаторов и шкал, дают достаточно противоречивые результаты. Связано это, во-первых, с особенностями респондентов: дети школьного возраста плохо знают уровень образования родителей, - во-вторых, с особенностями используемых шкал: очень дробная шкала в вопросе про количество книг дома сложна для восприятия и снижает согласованность ответов родителей и детей, - в третьих, с социальным контекстом места проведения опроса: вопрос про профессию родителей показывает наиболее высокую согласованность, но есть трудности с межстрановыми сравнениями. Можно сказать, проведенный анализ показал, что практические исследования в образовании нуждаются в пересмотре распространенных и принимаемых по умолчанию индикаторов и шкал. Необходим поиск новых операндов СЭС.
Исследование второго вопроса выявило, что снижение самооценки детей по математике связано с некоторыми внешкольными характеристиками учащихся: полом и СЭС семьи ребенка. С другой стороны, было показано, что школа также имеет значение для самооценки. Во-первых, школьный контекст может влиять на самооценку по предмету, в частности обучение в «сильном» классе негативно влияет на самооценку «слабых» учащихся. Во-вторых, учительские практики, такие как дифференциация заданий в зависимости от способностей учеников может привести к усилению эффекта «большой рыбы в маленьком пруду» для учеников с невысокими (в сравнении с классом) личными достижениями. Эти результаты представляются важными, так имеющиеся исследования показывают наличие связи между самооценкой учащихся и их академическими достижениями. Если на первую группу факторов школа повлиять не может, то определение школьного контекста (распределение учеников по классам) и выбор практик преподавания – те инструменты, которые могут быть использованы для создания положительной самооценки по предмету, что может привести к росту мотивации и увеличению академических результатов детей.
Исследование третьего вопроса показало различие в эффектах сверстников на образовательные достижения и выбор образовательной траектории учащимся. В случае с образовательными достижениями это различие имеет предметную специфику. Например, оценка учащегося за 1е полугодие по алгебре связана только со средней оценкой по предмету в классе, но не со средними оценками его значимых (референтных) одноклассников. По физике оценка учащегося показывает положительную связь не только со средним баллом в классе, но также со средними оценками значимых одноклассников, даже при учете фиксированных эффектов класса. При объяснении выбора учащимся технической специальности значение имеет не доля одноклассников, планирующих поступление на техническую специальность, а социальные характеристики значимых для ученика одноклассников, планирующих поступать на техническую специальность. Наличие значимого одноклассника, выбирающего техническую специальность и имеющего центральное положение в сети, увеличивает шанс выбора учащимся технической специальности. Полученные результаты показывают, что измерение эффекта сверстников обычно используемым способом через «среднее в классе» может давать смещенные оценки и свидетельствуют о важности при объяснении происходящего в школе учитывать в анализе особенности социальной сети детей.
3. Сравнительное международное исследование представлений и убеждений учителей математики об обучении математике в основной школе
Цель исследования: проведение сравнительного анализа убеждений и представлений российского учителя математики и учителя математики из других стран.
Качество преподавания непосредственно связано с достижениями учащихся. Этим объясняется возросший интерес к учителю и увеличение количества сравнительных исследований учителей. Особое место в школьном образовании отводится математике. В данной работе описаны результаты международного сравнительного исследования убеждений учителей математики основной школы об эффективном преподавании и обучении математике.
В качестве инструмента для проведения исследования используется опросник исследования NorBA (сравнительное исследование математического образования в странах Северной Балтики (Латвия, Литва, Финляндия, Швеция, Норвегия)), в котором особый акцент сделан на внутренние установки учителя математики по отношению к математике как науке, обучению математике, собственной практике. Одной из ключевых задач проекта являлось проведение исследования по валидизации анкеты NorBA как инструмента межстранового сравнительного исследования. В качестве эмпирической базы исследования использовалась база данных международного исследования NorBA и данные, полученные в ходе собственного качественного исследования.
Результаты исследования:
Было проведено всестороннее исследование опросника NorBA, включающее в себя исследование надежности и валидности (конструктной и критериальной). Исследование включало в себя анализ размерности и психометрических качеств теста с помощью методов IRT, исследование инвариантности факторной структуры теста с помощью конфирматорного факторного анализа и IRT, исследование критериальной валидности, а так же качественное исследование соответствия результатов анкеты теоретическому описанию конструктов «конструктивизм» и «традиционализм». По результатам анализа опросник можно считать удовлетворяющим требованиям валидности и надежности.
Далее было осуществлено сравнительное исследование убеждений учителей математики в трех странах: России, Эстонии и Латвии. Отдельное внимание было уделено сравнению русскоговорящих учителей математики Эстонии и Латвии и их российских коллег. Результаты исследования показали, что различия в убеждениях учителей разных стран статистически значимы по всем шкалам, участвовавшим в анализе. В основном учителя реализуют свои убеждения в ежедневной практике в классах. Российские учителя демонстрируют значимо более высокий уровень конструктивизма, в то время как эстонские учителя совмещают в рамках преподавания оба подхода - конструктивистский и традиционный. Российские учителя и эстонские русскоязычные преподаватели гораздо более схожи в своих убеждениях об эффективном преподавании математики, чем российские учителя и латвийские русскоязычные преподаватели. Результаты исследования помогут точнее оценить ситуацию в общеобразовательной школе и спрогнозировать ее развитие.
4. Решение контекстных задач: роль предметных знаний, общих когнитивных способностей и учительских факторов
Цели исследования:
2. Популярность идеи о необходимости оценивать умение школьников использовать математику, изучаемую в школе, в повседневном контексте привела к наполнению учебников и итоговых тестов специальными заданиями, т.н. «реалистичными», «обыденными», «контекстными» и пр. Хотя декларируется приблизительно одна и та же цель этих заданий – проверить, умеет ли школьник использовать математические идеи и процедуры в контексте реальной жизни – по своим параметрам эти задания серьезно разнятся, так что неясно на каком основании считается что они оценивают, то что декларируется. Основной причиной разрозненности оценочных заданий мы видим отсутствие теоретической модели таких заданий, которая легла в основание их спецификации, и поэтому в этом направлении была поставлена задача построить эту модель.
3. Проверка предположения о наличии специфичных практик преподавания математики, которые определенным образом были бы связаны с умением ученика использовать школьные знания в неакадемическом контексте.
Результаты исследования:
В результате качественного анализа ошибок показано, что при решении математических задач с обыденным контекстом часть трудностей была связана с требованиями моделирования – специфическими для этих заданий. Однако подавляющая часть ошибок была связана с дефицитами более общего характера: умения работать с чертежами и рисунками, стратегий решения новых задач, и установки на проверку и проблематизацию собственных рассуждений.
Для решения второй поставленной задачи данного направления была предложения модель, основанная на ключевых параметрах повседневной проблемы, где для решения может использоваться математика. В качестве модельных параметров заданий предлагается: 1) обыденная, семантика; 2) новизна, нетипичность; 3) ситуативная значимость вопроса; 4) относительно жесткая структура; 5) необходимость специфических математических знаний для решения. Было показано, как могут использоваться параметры для сравнения концептуально близких заданий с заданиями на перенос математических знаний в повседневный контекст.
Наконец, был проведен анализ учительских практик по математике в классах с высокими и низкими результатами PISA. Предполагалось, что способность учащихся применять знания в неакадемическом контексте связана со специфичными практиками преподавания математики в школе. Однако результаты исследования не выявили отдельных конкретных практик, специфичных для разных групп учащихся.