Публікація:
Semantic textual similarity models evaluation for tasks requiring binary threshold decisions

Завантаження...
Зображення мініатюри

Дата

2025

Назва журналу

ISSN журналу

Назва тома

Видавництво

ХНУРЕ

Дослідницькі проекти

Організаційні підрозділи

Видання журналу

Анотація

This work evaluates Semantic Textual Similarity (STS) models for tasks requiring binary threshold decisions. The experiment used English and Ukrainian STS datasets, categorizing sentence pairs as successful or challenging based on a similarity score difference threshold. GTE demonstrated higher resistance to typos in English, while MPNet and MiniLM struggled more with lexical and morphological variations in Ukrainian. The analysis highlights the importance of considering task-specific and dataset-related challenges when selecting models for optimal performance.

Опис

Ключові слова

semantic similarity, textual model, binary decision

Бібліографічний опис

Nikolaichuk A. I. Semantic textual similarity models evaluation for tasks requiring binary threshold decisions / A. I. Nikolaichuk // Радіоелектроніка та молодь у XXI столітті : матеріали 29-го Міжнар. молодіж. форуму, 16–19 квітня 2025 р. – Харків : ХНУРЕ, 2025. – Т. 6 – С. 470-472.

DOI