Публікація: Дослідження великих мовних моделей для завдань із відповідями на питання
Завантаження...
Дата
2025
Автори
Назва журналу
ISSN журналу
Назва тома
Видавництво
Анотація
Об’єктом дослідження є великі мовні моделі, що використовуються для автоматичної генерації відповідей у завданнях типу «питання відповідь». Предметом дослідження є якість відповідей, які генерують ці моделі, а також інструменти й метрики, що використовуються для автоматичної оцінки таких відповідей. Метою роботи є порівняльний аналіз сучасних великих мовних моделей у задачах питання-відповіді з використанням набору автоматичних метрик, а також дослідження можливостей покращення якості відповідей шляхом донавчання однієї з моделей. У процесі дослідження використовувалися методи порівняльного аналізу, автоматизованої обробки тексту, семантичного зіставлення текстових відповідей, а також метод донавчання моделей на основі спеціалізованого корпусу даних. Для оцінювання відповідей застосовано метрики BLEU, ROUGE, METEOR, BERTScore та MoverScore. У результаті роботи було обґрунтовано вибір трьох моделей– GPT, LLaMA та BLOOM. Було побудовано експериментальну модель аналізу, яка дозволяє фіксувати якість відповідей за різними критеріями, порівнювати результати до та після fine-tuning, а також оцінювати адекватність сучасних автоматичних метрик у задачах оцінювання відповіді.
Опис
Ключові слова
еволюція відповіді, завдання типу «питання відповідь», генерація відповідей
Бібліографічний опис
Норець Ден. А. Дослідження великих мовних моделей для завдань із відповідями на питання : пояснювальна записка до кваліфікаційної роботи здобувача вищої освіти на другому (магістерському) рівні, спеціальність 122 Комп’ютерні науки / Ден. А. Норець ; М-во освіти і науки України, Харків. нац. ун-т радіоелектроніки. – Харків, 2025. – 119 с.