ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ
Вестник науки · 2026-11-01 · 1 (11 (104)) · 858-872
DOI: 10.68367/33711 ↗At a glance
Journal article in Вестник науки, published online on 2026-11-01. Written by Р.А. Хуснутдинов and 1 co-authors. 16 references.
Abstract (original language)
большие языковые модели (LLM) применяются для автоматического создания учебных тестов, однако полученные от них данные не всегда соответствуют требованиям программной системы. Среди распространённых проблем — наличие постороннего текста вокруг JSON, отсутствие обязательных полей, несоответствие правильного ответа предложенным вариантам и дублирование вариантов. При этом некоторые ошибки невозможно обнаружить только средствами синтаксического анализа: они становятся заметны уже при использовании сформированного задания. Цель работы — разработать механизм обработки ответов языковых моделей, который позволяет отсеивать некорректные задания до их сохранения в базе данных образовательной платформы. Методы исследования включают классификацию ошибок, возникающих при взаимодействии LLM с приложением, разработку последовательности проверок и реализацию предложенного подхода в веб-платформе SmartExam AI. Результаты. Выделены пять классов ошибок, предложена последовательность из пяти этапов проверки: извлечение данных, синтаксический разбор, проверка соответствия схеме, семантическая проверка с учётом типа задания и нормализация. Определены правила проверки четырёх типов тестовых заданий и результатов оценивания развёрнутых ответов. Практическая значимость. Предложенный подход может использоваться в образовательных платформах и других программных системах, работающих со структурированными данными, полученными от облачных или локально развёрнутых языковых моделей.
Cite
APA
Хуснутдинов, Р., & Ризванов, Д. (2026). ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ. Вестник науки, 1(11 (104)), 858-872. https://doi.org/10.68367/33711
Vancouver
Хуснутдинов Р, Ризванов Д. ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ. Вестник науки. 2026;1(11 (104)):858-872. doi:10.68367/33711
BibTeX
@article{2026,
author = {Хуснутдинов, Р.А. and Ризванов, Д.А.},
title = {ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ},
journal = {Вестник науки},
year = {2026},
volume = {1},
number = {11 (104)},
pages = {858--872},
doi = {10.68367/33711}
}
EUVIMED