Авдеева Светлана Михайловна – канд. тех. наук, руководитель лаборатории измерения новых конструктов и дизайна тестов Центра психометрики и измерений в образовании Института образования,
101000, г. Москва, Потаповский пер., 16, стр. 10.
ResearcherID: ABC-6896-2020.
Svetlana M. Avdeeva – Cand. Sci. (Engineering), Head of the Laboratory for Measuring New Constructs and Test Design, Institute of Education,
16, bld. 10, Potapovsky lane, 101100 Moscow.
ResearcherID: ABC-6896-2020.
Тарасова Ксения Вадимовна – канд. пед. наук, директор Центра психометрики и измерений в образовании Института образования,
101000, г. Москва, Потаповский пер., 16, стр. 10.
ResearcherID: ABD-3327-2020
Ksenia V. Tarasova – Cand. Sci. (Pedagogical Sciences), Director of the Centre for Psychometrics and Measurement in Education, Institute of Education,
16, bld. 10, Potapovsky lane, 101100 Moscow.
ResearcherID: ABD-3327-2020.
Статья посвящена проблеме оценки универсальных компетенций, которые приобретают всё большее значение в условиях современных требований к выпускникам вузов. Рассматривается необходимость создания валидных и надёжных инструментов для измерения таких навыков, как критическое мышление, креативность, коммуникация и способность решать комплексные задачи. Приводится анализ доказательного дизайна, который предполагает интеграцию когнитивных теорий, инновационных образовательных технологий и психометрических моделей для достижения объективной оценки универсальных компетенций.
Особое внимание уделяется методу доказательной аргументации, который опирается на использование сценарных заданий, контекстуально приближённых к реальным жизненным и профессиональным ситуациям. Метод доказательной аргументации акцентирует внимание на построении валидного аргумента, который связывает наблюдаемые действия студентов с заявляемыми выводами об уровне их компетенций. Метод позволяет не только фиксировать проявления знаний и навыков в приближённых к реальной жизни ситуациях, но и структурировать процесс разработки инструментов таким образом, чтобы полученные эмпирические результаты можно было обосновать теоретически. Важную роль в доказательном подходе играет процесс построения аргумента на основе собранных доказательств, что отличает данный подход от традиционных методов, где акцент делается на статистических и психометрических характеристиках тестов. Изложение основ метода проводится на примере инструмента по оценке критического мышления студентов вузов CT Test, который обладает доказанным психометрическим качеством. Данный инструмент прошёл апробацию более чем на 10 000 студентов российских вузов.
В статье обосновывается, что внедрение инструментов, основанных на доказательном подходе, позволит значительно улучшить качество оценки универсальных компетенций у студентов, что делает данный подход перспективным для применения в образовательном процессе.
The article addresses the issue of assessing universal competencies, which are becoming increasingly important given modern demands on university graduates. It emphasizes the need for valid and reliable tools to measure skills such as critical thinking, creativity, communication, and complex problem-solving. The paper presents an analysis of an evidence-based design approach, which integrates cognitive theories, innovative educational technologies, and psychometric models to achieve objective assessments of these competencies.
Particular attention is given to the evidence-centered design methodology, which relies on scenario-based tasks closely reflecting real-life and professional situations. This method emphasizes constructing valid argument that link students’ observable behaviors to claims about their competence levels. The approach not only captures demonstrations of knowledge and skills in realistic contexts but also structures the instrument development process to ensure that empirical results are theoretically sound. A distinctive feature of this approach is the process of building arguments from collected evidence, differentiating it from traditional methods, which focus primarily on the statistical and psychometric properties of tests.
The principles of this method are illustrated using the CT Test for assessing university students’ critical thinking, a tool with established psychometric quality, which has been piloted with over 10,000 students in Russian universities. The article argues that implementing evidence-based tools will substantially enhance the validity and reliability of competency assessments among students, making this approach a promising candidate for integration into educational practice.
The authors declare that there are no conflicts of interest present.