Розробка системи динамічної оптимізації обсягів збереження даних у Data Lake на основі класифікації корисності даних

Мітрошкіна, К. В.

Публікація:
Розробка системи динамічної оптимізації обсягів збереження даних у Data Lake на основі класифікації корисності даних

dc.contributor.author	Мітрошкіна, К. В.
dc.date.accessioned	2025-08-05T10:52:23Z
dc.date.available	2025-08-05T10:52:23Z
dc.date.issued	2025
dc.description.abstract	Об’єкт дослідження – система управління обсягами даних у хмарному сховищі типу Data Lake. Предмет дослідження – методи динамічної оптимізації зберігання даних на основі класифікації їх корисності. Мета роботи – розробити систему автоматизованого управління обсягами збереження даних у Data Lake, яка дозволяє знижувати витрати на інфраструктуру за рахунок аналізу й класифікації корисності даних з використанням машинного навчання. Методи дослідження – аналіз літератури та сучасних підходів до зберігання даних у хмарних середовищах, моделювання, машинне навчання, побудова архітектури програмної системи, реалізація прототипу на основі Python та Apache Spark. У результаті роботи здійснено аналіз проблем надмірного зберігання даних у Data Lake, побудовано модель корисності даних на основі доступу, частоти використання та джерела надходження. Розроблено систему, що включає модуль класифікації даних, модуль моніторингу доступу та модуль застосування політик зберігання. Система протестована на реальних обсягах симульованих даних, що дозволило досягти зменшення витрат на зберігання до 38% без втрати критично важливої інформації. Виявлено обмеження поточної моделі та запропоновано шляхи подальшої оптимізації.
dc.identifier.citation	Мітрошкіна К. В. Розробка системи динамічної оптимізації обсягів збереження даних у Data Lake на основі класифікації корисності даних : пояснювальна записка до кваліфікаційної роботи здобувача вищої освіти на другому (магістерському) рівні, спеціальність 122 Комп’ютерні науки / К. В. Мітрошкіна ; М-во освіти і науки України, Харків. нац. ун-т радіоелектроніки. – Харків, 2025. – 60 с.
dc.identifier.uri	https://openarchive.nure.ua/handle/document/32349
dc.language.iso	uk
dc.subject	архівація
dc.subject	життєвий цикл даних
dc.subject	хмарні технології
dc.subject	життєвий цикл даних
dc.subject	класифікація корисності
dc.subject	контроль доступу
dc.subject	оптимізація зберігання
dc.subject	політики зберігання
dc.title	Розробка системи динамічної оптимізації обсягів збереження даних у Data Lake на основі класифікації корисності даних
dc.type	Other
dspace.entity.type	Publication