Автоматизоване генерування ілюстрацій на основі сценографів, отриманих з тексту

Abstract

У цій кваліфікаційній роботі досліджується метод автоматизованої генерації ілюстрацій на основі сценографів, побудованих із текстових описів. Розглянуто технологію, яка поєднує трансформерні моделі для виділення об’єктів та їхніх відношень з генеративними нейронними мережами для синтезу відповідних зображень. Реалізовано архітектуру системи, що складається з модуля побудови семантичного графа, попередньої обробки сценографа та генератора зображень. Проведено експерименти на відкритих наборах даних, результати яких підтвердили ефективність розглянутої технології у структурній відповідності синтезованих ілюстрацій.