Моделирование адаптивного теста по результатам классического тестирования

Uloženo v:
Podrobná bibliografie
Název: Моделирование адаптивного теста по результатам классического тестирования
Autoři: Безруков, А.И., Акимова, С.А.
Zdroj: Современные информационные технологии и IT-образование, Vol 19, Iss 2, Pp 498-507 (2023)
Informace o vydavateli: The Fund for Promotion of Internet media, IT education, human development «League Internet Media», 2023.
Rok vydání: 2023
Sbírka: LCC:Electronic computers. Computer science
Témata: компьютерное тестирование знаний, теория педагогических измерений, классическое и адаптивное тестирование, достоверность результатов тестирования, алгоритм байеса, имитационное моделирование тестирования, computer knowledge testing, item response theory, classical and adaptive testing, reliability of test results, bayesian algorithm, testing simulation, Electronic computers. Computer science, QA75.5-76.95
Popis: Тестирование широко используется учителями и преподавателями вузов, как для текущего, так и для аттестационного контроля знаний. По сравнению с традиционными методами оценки, тестирование – более быстрый, менее трудоемкий и более объективный метод. Однако тестирование часто вызывает нарекания. Его называют «лотереей», вспоминая случаи, когда удачливый троечник выполнял тест на «отлично», а отличник не мог справиться с тем же тестом. Тестирование – случайный процесс, в котором мы можем гарантировать только вероятности, а не его результат. Чтобы снизить воздействие случайных факторов, тест должен соответствовать рекомендациям теории педагогических измерений (IRT). Такие параметры теста, как: метод проведения тестирования, содержание и количество заданий в тесте, их распределение по трудности выполнения, рейтинговая шкала и т.д., должны задаваться исходя из целей тестирования, с учетом подготовленности аудитории. Обычно в педагогической практике используются классические алгоритмы тестирования, однако их цель: с максимальной точностью оценить уровень подготовленности испытуемых, не соответствуют цели проведения тестирования: расставить оценки, т.е. отнести каждого испытуемого к одной из заданных категорий. Более подходящим для этого является адаптивное тестирование, базирующееся на алгоритме Байеса, цель которого: наиболее точно оценить вероятности принадлежности тестируемого к каждой категории. Настоящая публикация посвящена сравнительному анализу алгоритмов классического и адаптивного тестирования. Для их сопоставления на результатах классического тестирования был имитирован адаптивный тест. Для сравнения достоверности результатов тестирования были рассчитаны матрицы рассеяния. Эксперимент показал, что достоверность адаптивного тестирования выше, чем классического, при том, что число выполненных заданий составляет 60% от заданий, при классическом тестировании. Результаты работы показывают важность внедрения адаптивных методов в системы компьютерного тестирования, используемые при контроле знаний.
Druh dokumentu: article
Popis souboru: electronic resource
Jazyk: Russian
ISSN: 2411-1473
Relation: http://search.rads-doi.org/project/15040/object/219954; https://doaj.org/toc/2411-1473
DOI: 10.25559/SITITO.019.202302.498-507
Přístupová URL adresa: https://doaj.org/article/19e48d7340ea421e93269da46e97f29c
Přístupové číslo: edsdoj.19e48d7340ea421e93269da46e97f29c
Databáze: Directory of Open Access Journals
Popis
Abstrakt:Тестирование широко используется учителями и преподавателями вузов, как для текущего, так и для аттестационного контроля знаний. По сравнению с традиционными методами оценки, тестирование – более быстрый, менее трудоемкий и более объективный метод. Однако тестирование часто вызывает нарекания. Его называют «лотереей», вспоминая случаи, когда удачливый троечник выполнял тест на «отлично», а отличник не мог справиться с тем же тестом. Тестирование – случайный процесс, в котором мы можем гарантировать только вероятности, а не его результат. Чтобы снизить воздействие случайных факторов, тест должен соответствовать рекомендациям теории педагогических измерений (IRT). Такие параметры теста, как: метод проведения тестирования, содержание и количество заданий в тесте, их распределение по трудности выполнения, рейтинговая шкала и т.д., должны задаваться исходя из целей тестирования, с учетом подготовленности аудитории. Обычно в педагогической практике используются классические алгоритмы тестирования, однако их цель: с максимальной точностью оценить уровень подготовленности испытуемых, не соответствуют цели проведения тестирования: расставить оценки, т.е. отнести каждого испытуемого к одной из заданных категорий. Более подходящим для этого является адаптивное тестирование, базирующееся на алгоритме Байеса, цель которого: наиболее точно оценить вероятности принадлежности тестируемого к каждой категории. Настоящая публикация посвящена сравнительному анализу алгоритмов классического и адаптивного тестирования. Для их сопоставления на результатах классического тестирования был имитирован адаптивный тест. Для сравнения достоверности результатов тестирования были рассчитаны матрицы рассеяния. Эксперимент показал, что достоверность адаптивного тестирования выше, чем классического, при том, что число выполненных заданий составляет 60% от заданий, при классическом тестировании. Результаты работы показывают важность внедрения адаптивных методов в системы компьютерного тестирования, используемые при контроле знаний.
ISSN:24111473
DOI:10.25559/SITITO.019.202302.498-507