Цифровой помощник для автоматизированной проверки выпускных квалификационных работ

архитектура, методика применения и экспериментальная оценка

Аннотация

Введение. Актуальность исследования обусловлена высокой трудоемкостью проверки выпускных квалификационных работ на соответствие требованиям к структуре, оформлению, библиографическому аппарату и корректности внутритекстовых ссылок. Значительная часть таких нарушений является формализуемой, однако на практике их выявление часто выполняется научным руководителем вручную, что увеличивает время подготовки работы к защите и снижает возможность сосредоточиться на содержательной оценке исследования. Целью работы является разработка и экспериментальная оценка архитектуры цифрового помощника для автоматизированной проверки выпускных квалификационных работ, объединяющего структурно-стилевой анализ документа, правило-ориентированный анализ учебно-научного текста, проверку библиографии и формирование локализованных комментариев в исходном файле.
Материалы и методы. Предложена архитектура программной системы, основанная на разделении интерфейсного, прикладного, доменного и инфраструктурного слоев. Ключевым элементом решения является единая модель замечания, позволяющая приводить результаты разных анализаторов к общему представлению и возвращать их пользователю в виде ошибок и рекомендаций.
Результаты исследования. Экспериментальная оценка проводилась на 50 реальных выпускных квалификационных работах студентов бакалавриата и магистратуры, а также на 1000 синтетических документах с заранее внедренными нарушениями. В апробации участвовали 10 научных руководителей. По классу формализуемых ошибок точность выявления составила 100%, полнота – 94,7%. Для текстовых и содержательных рекомендаций точность составила 73,0%, что объясняется их контекстной природой и необходимостью экспертной интерпретации.
Обсуждение и заключение. Показано, что цифровой помощник сокращает время первичной проверки одной работы с нескольких часов до примерно одной минуты и может использоваться как инструмент предварительной экспертизы, не заменяющий научного руководителя, а снижающий объем рутинной проверки.