Розроблення інтелектуальної мобільної системи для супроводу відвідувачів музеїв на основі технологій комп’ютерного зору

Abstract

Об’єктом роботи є процес автоматизованої ідентифікації музейних експонатів та формування персоналізованого екскурсійного контенту на основі мультимодального аналізу зображень. Метою роботи є розроблення вебзастосунку MuseGuide AI для персоналізованого супроводу відвідувачів музеїв із використанням Google Gemini Vision API та синтезу мовлення засобами Microsoft Edge TTS. Під час роботи використано: методи мультимодального аналізу зображень та порівняльного аналізу великих лінгвістичних моделей, методи нейромережевого синтезу мовлення та методи веброзробки. Практична цінність застосунку полягає в автоматизації інформаційного супроводу відвідувачів музеїв без необхідності попередньої підготовки контенту кураторами. Розроблено вебзастосунок, що забезпечує автоматичну ідентифікацію музейних експонатів за фотографією, генерування структурованого екскурсійного опису та озвучення результату синтезованим голосом українською мовою.