Des chercheurs du Barcelona Supercomputing Center-Centro Nacional de Supercomputación (BSC-CNS) forment des modèles d'intelligence artificielle (IA) pour reconnaître la symbologie et le contenu des peintures du musée du Prado, à Madrid, et même détecter des détails qui passent inaperçus par le œil humain. L'objectif du projet FrAI Angelico est de générer des descriptions détaillées des œuvres picturales du Museo del Prado qui aident à mieux comprendre le patrimoine culturel et historique de ce musée.
Comme le rapporte aujourd'hui le BSC-CNS dans un communiqué, après un premier projet pilote, l'enjeu est d'analyser l'ensemble de la collection, avec plus de 35 000 œuvres d'art, dont 8 000 appartiennent à l'une des collections de peintures les plus importantes d'Europe. ., avec des peintures de Velázquez , Goya ou El Greco .
En 2019, le Museo del Prado a déjà mis en place une lecture accrue des textes descriptifs des fiches de travail publiées sur le web grâce à un moteur de compréhension du langage naturel (NLU) qui permet de reconnaître les entités et les concepts qui y sont traités pour faciliter une lecture contextualisée au utilisateur. Désormais, avec le soutien du BSC, il ira encore plus loin en appliquant l'IA pour étudier et diffuser ses collections et mettra en place un système qui facilitera la reconnaissance des objets sur les images des œuvres elles-mêmes.
Les chercheurs du BSC ont développé un modèle d'IA de détection d'objets qu'ils ont formé avec des descriptions de milliers de peintures afin qu'il soit capable d'analyser avec précision le contenu des peintures du musée du Prado, au point de détecter des détails ou des objets qui peuvent passer inaperçus à l'œil humain.
FrAI Angelico est un prototype basé sur la technologie d'un précédent projet similaire, financé par l'Union européenne, appelé "Saint George sur un vélo", coordonné par le BSC en collaboration avec la Fondation Europeana. Dans une première phase, 25 œuvres seront analysées, mais l'objectif est d'établir une collaboration permettant d'étudier l'ensemble de la collection du musée du Prado.
Avec de la formation, les nouveaux modèles sont capables de détecter des objets qui sont communs dans les représentations picturales du passé, comme un crâne, une couronne d'épines, des anges ou des démons. Le prochain défi consiste à apprendre à ces systèmes d'IA à interpréter les concepts abstraits de la peinture européenne classique, tels que deux corps nus plus un ange représentent probablement Adam et Eve ou une colombe accompagnée d'un ange et d'une personne le Saint-Esprit.
De plus, la possibilité que les systèmes d'IA soient capables de détecter les objets qui apparaissent dans les peintures aidera le musée du Prado et d'autres institutions du secteur du patrimoine culturel à décrire et classer automatiquement leurs œuvres d'art, ce qui facilitera l'interprétation du sens des peintures.
"Grâce à cette initiative, il sera possible d'analyser les peintures, de détecter des objets que le visiteur n'a pas perçus, de découvrir des relations entre leurs éléments ou d'interpréter leur symbolisme, de créer des expositions virtuelles avec des peintures connexes de n'importe où dans le monde, et servira de la base d'une nouvelle façon d'étudier et de comprendre notre patrimoine culturel », a expliqué la chercheuse du BSC María Cristina Marinescu .
Source : EFE
Continuer à lire