EUVIMEDOpdag EUVIMED
Crossref

ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ

Р.А. Хуснутдинов, Д.А. Ризванов

Вестник науки · 2026-11-01 · 1 (11 (104)) · 858-872

DOI: 10.68367/33711 ↗

At a glance

Journal article in Вестник науки, published online on 2026-11-01. Written by Р.А. Хуснутдинов and 1 co-authors. 16 references.

AbstractBibliografiske oplysningerCiteRelated studies

Abstract (original language)

большие языковые модели (LLM) применяются для автоматического создания учебных тестов, однако полученные от них данные не всегда соответствуют требованиям программной системы. Среди распространённых проблем — наличие постороннего текста вокруг JSON, отсутствие обязательных полей, несоответствие правильного ответа предложенным вариантам и дублирование вариантов. При этом некоторые ошибки невозможно обнаружить только средствами синтаксического анализа: они становятся заметны уже при использовании сформированного задания. Цель работы — разработать механизм обработки ответов языковых моделей, который позволяет отсеивать некорректные задания до их сохранения в базе данных образовательной платформы. Методы исследования включают классификацию ошибок, возникающих при взаимодействии LLM с приложением, разработку последовательности проверок и реализацию предложенного подхода в веб-платформе SmartExam AI. Результаты. Выделены пять классов ошибок, предложена последовательность из пяти этапов проверки: извлечение данных, синтаксический разбор, проверка соответствия схеме, семантическая проверка с учётом типа задания и нормализация. Определены правила проверки четырёх типов тестовых заданий и результатов оценивания развёрнутых ответов. Практическая значимость. Предложенный подход может использоваться в образовательных платформах и других программных системах, работающих со структурированными данными, полученными от облачных или локально развёрнутых языковых моделей.

Cite

APA

Хуснутдинов, Р., & Ризванов, Д. (2026). ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ. Вестник науки, 1(11 (104)), 858-872. https://doi.org/10.68367/33711

Vancouver

Хуснутдинов Р, Ризванов Д. ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ. Вестник науки. 2026;1(11 (104)):858-872. doi:10.68367/33711

BibTeX
@article{2026,
  author = {Хуснутдинов, Р.А. and Ризванов, Д.А.},
  title = {ВАЛИДАЦИЯ СТРУКТУРИРОВАННОГО ВЫВОДА БОЛЬШИХ ЯЗЫКОВЫХ МОДЕЛЕЙ ПРИ АВТОМАТИЧЕСКОЙ ГЕНЕРАЦИИ УЧЕБНЫХ ТЕСТОВ},
  journal = {Вестник науки},
  year = {2026},
  volume = {1},
  number = {11 (104)},
  pages = {858--872},
  doi = {10.68367/33711}
}
Start for free →