Труды КНЦ. Технические науки. – 2026. - № 1
Из сопоставления ответов видно, что, несмотря на общий смысл вопросов 1, 2 и 3, система сгенерировала ответы, содержащие противоречивые сведения: «опыт работы по специальности не менее 5 лет» и «опыт работы по специальности не менее 3 лет». Это связано с тем, что в вопросах 1 и 2 содержатся ключевые слова, поэтому используются настройки, обеспечивающие нахождение точных фактов в документе. Вопрос 3 ключевых слов не содержит, поэтому система относит его к общему типу запросов. Ошибка в данном случае может быть вызвана неправильно выбранным фрагментом контекста (например, сведения берутся из требований к старшему научному сотруднику) или использованием знаний, которые были приобретены моделью в процессе ее обучения. Примеры демонстрируют повышение точности и релевантности генерируемых ответов при применении типизации запросов пользователя. Далее приводится пример того, как ответ модели изменяется в зависимости от формулировки вопроса. Вопросы относились к документу «ПОЛОЖЕНИЕ о конкурсной комиссии ФИЦ КНЦ РАН и порядке ее работы при проведении конкурса на замещение должностей научных работников». В опрос 4: «О чем документ?» От вет : «Документ представляет собой полное описание правил и порядка формирования конкурсной комиссии ФИЦ КНЦ РАН, а также ее работы при проведении конкурсов на замещение должностей научных работников в этом учреждении. Основные темы и идеи этого документа: 1) общее описание состава и функций конкурсной комиссии; 2) порядок формирования конкурсной комиссии; 3) правила ее работы при проведении конкурсов. В документе нет конкретных указаний на использование каких-либо методов или технологий. Документ не содержит важных выводов или результатов, поскольку его цель — определить порядок и правила проведения конкурсов в ФИЦ КНЦ РАН». В опрос 5: «В чем суть документа?» Ответ: «Суть документа - это Положение о конкурсной комиссии ФИЦ КНЦ РАН и порядке ее работы при проведении конкурса на замещение должностей научных работников». Видно, что в первом случае выдается, более развернутый ответ, чем во втором. Для устранения выявленных недостатков требуется либо дальнейшая «донастройка» модели с расширением множества типов запросов, либо переход к более мощным БЯМ. Заключение В статье представлены начальные этапы разработки системы интеллектуального поиска информации на сайте ФИЦ КНЦ РАН. Спроектирована архитектура системы и определены технологии (инструменты), используемые при построении ее основных структурных элементов. Разработан прототип системы, реализующий некоторые из предполагаемых функций интеллектуального поиска. Разрабатываемая система нацелена на повышение релевантности ответов на пользовательские запросы, формулируемые на естественном языке и касающиеся содержимого сайта, а также электронной библиотеки (электронного хранилища документов) ФИЦ КНЦ РАН. Ответы также предоставляются на естественном языке с указанием ссылок на источники информации, если это требуется. Для поддержания диалога с пользователем применяются БЯМ. В ходе проведенных исследований было протестировано несколько языковых моделей, среди которых в условиях ограничений аппаратного обеспечения наилучшие результаты показала БЯМ «llama3.1:8b». Для снижения негативного влияния возможных «галлюцинаций» БЯМ на результаты поиска предложено использовать RAG-технологию, которая позволяет сфокусироваться при построении ответа на той информации, которая потенциально представляет наибольший интерес для пользователя. Причем, как правило, это новая для БЯМ информация, которая не могла быть учтена в процессе обучения модели. Другими словами, в рамках RAG-технологии имеется возможность адаптировать поведение БЯМ с учетом необходимого контекста без дорогостоящей процедуры ее полного переобучения. Это особенно важно в рассматриваемых задачах интеллектуализации поиска, когда информация на сайте может оперативно добавляться и модифицироваться. С целью исключения возможности передачи конфиденциальных сведений внешним сервисам (например, облачным платформам) было принято решение о локальном развертывании программной Труды Кольского научного центра РАН. Серия: Технические науки. 2026. Т. 17, № 1. С. 129-142. Transactions of the Kola Science Centre of r A s . Series: Engineering Sciences. 2026. Vol. 17, No. 1. P. 129-142. © Шестаков А. В., Зуенко А. А., Зуенко О. Н., 2026 1 4 0
Made with FlippingBook
RkJQdWJsaXNoZXIy MTUzNzYz