Аннотация:
Разработка эффективных систем автоматизированного контроля знаний непосредственно связана с реализацией программного модуля для оценки ответов на вопросы контрольного теста, свободно сформулированных на естественном языке. Ранее автором был разработан экспериментальный прототип такой системы и проведен эксперимент, в котором короткие ответы на вопросы базовых типов, полученные от студентов, были обработаны прагматически-ориентированным алгоритмом обработки вопросно-ответных текстов для оценки результатов работы алгоритма, нахождения и разрешения ситуаций некорректного функционирования. В настоящей статье представлена следующая итерация развития алгоритма для обработки ответов на более сложные вопросы, подразумевающие раскрытие нескольких отношений, такие как «Определение» и «Описание». Представлено описание особенностей алгоритма, в частности, решение проблемы сегментации текста ответа на базовые части, задача обработки которых уже решена. Описаны результаты эксперимента, проведенного с использованием полученного прототипа с получением ответов от студентов и анализом ситуаций некорректного функционирования.
Ключевые слова:
обработка естественного языка, автоматизированная оценка ответов, цифровое образование.
УДК:
378.147: 519.767.6
Поступила в редакцию: 24.12.2023 Принята в печать: 11.10.2024