Невоспроизводимость результатов является не исключительно фундаментальной проблемой, оторванной от реальности. Применение методов, предложенных и показавших свою эффективность в одном исследовании, но не продемонстрировавших такого результата в других, на практике может привести к растрате ресурсов или негативным последствиям. Например, в системе образования очень часто обсуждают и применяют стили обучения (Newton P. M. and Salvi A., 2020). Суть теории состоит в том, что человек может быть классифицирован как аудиал, визуал или кинестетик, а значит, использование предпочитаемого им стиля при обучении приведет к более высоким образовательным результатам: аудиал будет лучше воспринимать новую информацию на слух, визуалу эффективнее показывать видео и так далее. Существуют разные варианты этой теории (например, о том, что для визуалов нужно использовать глаголы с «визуальной» семантикой – «посмотрите», «видите» и т. д.) и ее применения в школе, которым учителей обучают в том числе на курсах повышения квалификации (Coffield F. et al., 2004). Однако научные исследования показывают, что эффекта повышенного запоминания информации при обучении в предпочитаемом стиле нет (Husmann et al., 2019). Одним из возможных объяснений такой привязанности практиков к этой теории называют то, что использование предпочитаемого стиля обучения ведет к субъективному ощущению повышения качества усвоения материала; однако проблема в том, что, когда дело доходит до объективной проверки знаний, эффекта нет (Pashler H. et al., 2008). Получается, что на практике используется метод, который не работает.
В этом контексте проведение дополнительных исследований с целью проверки уже показанных эффектов (особенно тех экспериментов, что были проведены в начале/середине XX века) или оценка эффективности уже предложенных техник важны для психологической науки. Но этот принцип является только частью глобального движения открытой науки, которая сейчас считается одним из основных способов выхода из кризиса репликации (см., например, Sanjana, 2021; Quintana, 2021). Помимо этого, в широкое употребление входит: публикация статей в открытом доступе (любой желающий может их скачать и прочитать); пререгистрация исследований (предварительная оценка независимыми экспертами методов и гипотез до его проведения); публикация инструментов, методов, данных, протоколов и кода, с помощью которого обрабатывались данные исследования, вместе с основным текстом статьи, создание репликационных консорциумов и др. Исходя из этой логики и был задуман и создан ПлюсКонсорциум.
ПлюсКонсорциум был создан в 2019 году буквально во время обеда, на котором коллектив нашей лаборатории, включая научного руководителя Юлию Ковас, обсуждал проблемы современной науки и то, что конкретно мы можем сделать для их решения. Мы поставили перед собой задачу репликации эффектов из отечественных и международных исследований, которые важны для образования и могут быть с легкостью применены на практике. Причем такой репликации, которая надежно показывала бы, есть ли эффект и какой он. Для этого нужны достаточно большие выборки (группы участников; как правило, от нескольких сотен человек), чтобы обеспечить одновременно мощность (надежность показанных эффектов) и репрезентативность исследования (то, насколько выводы могут быть обобщены и распространены на всю популяцию России, например). Там же зародился и наш слоган: «Доверяй, но verify» (
На этапе зарождения консорциума он состоял из авторов настоящей главы, еще нескольких сотрудников лаборатории и Юлии Ковас, но позже к нему присоединились представители других университетов (например, ТГУ, СПбГУ и ИТМО), школ и отдельные исследовательские команды. Наш коллектив стал тем, что называется steering committee – координационным комитетом.