1

Новый сервис ВШЭ анализирует качество заданий в онлайн-курсах

Опубликовано: 04.04.2017


Презентация инструмента для оценки качества заданий Psychometrics 1: Difficulty and Discrimination прошла на партнерской конференции Coursera.

Сервис представил Дмитрий Аббакумов, руководитель Центра психометрических исследований в онлайн-образовании НИУ ВШЭ. Основная задача проекта – выявить некачественные задания в онлайн-курсах и помочь разработчикам курсов оптимизировать измерения. Изначально сервис создавался как внутренний инструмент Дирекции по онлайн-обучению Вышки. А в итоге было принято решение открыть его для всех университетов-партнеров платформы Coursera.

Сервис работает со стандартной выгрузкой данных платформы Coursera, которую может сделать data coordinator любого университета-партнера платформы. В текущей версии сервиса рассчитываются два параметра из классической психометрики, применимые для заданий с выбором ответа: трудность и дискриминативность. Эти два параметра позволят авторам курсов улучшить тесты. Например, упростить слишком сложные или усложнить слишком простые задания, выявить технические ошибки (например, когда на платформе был помечен неверный ключ к заданию), удалить задания, которые не делят студентов студентов по уровню подготовленности. В ближайший месяц разработчики сосредоточатся на улучшении пользовательских характеристик, а также добавят новые функции. Так, в апреле в сервисе появится новая метрика, применимая для заданий на взаимное оценивание.

Уже сейчас можно поработать с бета-версией сервиса, а подробности об его устройстве узнать из постера. Инструмент останется бесплатным.