Використання мультимодальних LLM для автоматизації процесів оцифрування даних щодо об'єктів культурної спадщини

Анотація

У статті розглянуто виклики пов'язані з накопиченням неструктурованих описів об’єктів культурної спадщини та недостатньою семантичною інтероперабельністю традиційних систем зберігання метаданих цих об’єктів, що суттєво обмежує доступність культурної спадщини та ефективність процесів її цифровізації. Метою роботи є розробка комплексного підходу до автоматизованого опрацювання неструктурованих музейних архівів із застосуванням мультимодальних великих мовних моделей. Запропонована клієнт-серверна архітектура поєднує технології системного промптингу з класами онтології CIDOC CRM для трансформації статичних описів експонатів у динамічні графи знань. Для гарантування машинної зчитуваності та усунення синтаксичного шуму під час генерації застосовано програмно-алгоритмічний механізм обмеженого декодування на рівні API. Забезпечення наукової достовірності та фактологічної точності реалізовано через впровадження гібридної взаємодії «людина в процесі», де музейний експерт здійснює перевірку розмічених LLM даних в інтерактивному інтерфейсі вебформи. Завершальний етап роботи програмно-алгоритмічного комплексу використовує автоматичне перетворення структурованих JSON-об'єктів на SPARQL-запити для збереження у графовій базі GraphDB із динамічною генерацією унікальних ідентифікаторів. Даний підхід суттєво зменшує витрати ресурсів на ручну каталогізацію, забезпечує структурну чистоту інформації та відкриває можливості для інтеграції оцифрованих музейних об’єктів до міжнародних агрегаторів культурної спадщини