Investigadores del Barcelona Supercomputing Center-Centro Nacional de Supercomputación (BSC-CNS) están entrenando modelos de inteligencia artificial (IA) para reconocer la simbología y el contenido de los cuadros del Museo del Prado, en Madrid. Incluso, se plantean detectar detalles que pasan desapercibidos al ojo humano.
El objetivo del proyecto FrAI Angelico es generar descripciones detalladas de las obras pictóricas del Museo del Prado que ayuden a entender mejor el patrimonio cultural e histórico de este museo.
Según informó el BSC-CNS en un comunicado, después de un primer proyecto piloto el reto es analizar toda la colección, con más de 35.000 obras de arte. De estas, un total de ocho mil pertenecen a uno de los fondos de pinturas más destacados de Europa, con cuadros de Velázquez, Goya o El Greco.
El Museo del Prado ya implementó en 2019 una lectura aumentada sobre los textos descriptivos de las fichas de obras publicadas en la web. Lo hizo a través de un motor de Comprensión del Lenguaje Natural (NLU) que permite reconocer entidades y conceptos tratados en las mismas para facilitar una lectura contextualizada al usuario.
Ahora, con el apoyo del BSC, dará un paso más aplicando la IA para estudiar y difundir sus colecciones. Además, implementará un sistema que facilitará reconocer objetos sobre las imágenes de las propias obras.
Un paso más al futuro con la inteligencia artificial
Los investigadores del BSC han desarrollado un modelo de IA de detección de objetos al que han entrenado con descripciones de miles de cuadros. Éste sería capaz de analizar de manera precisa el contenido de las pinturas del Museo del Prado, hasta el punto de detectar detalles u objetos que pueden pasar desapercibidos al ojo humano.
FrAI Angelico es un prototipo basado en la tecnología de un proyecto similar anterior. Financiado por la Unión Europea, se denominó «Saint George on a Bike». Estuvo coordinado por el BSC en colaboración con European Foundation.
En la primera fase, se analizarán 25 obras. No obstante, el objetivo es establecer una colaboración que permita estudiar todo el fondo del Museo del Prado.
Con el entrenamiento, los nuevos modelos son capaces de detectar objetos que son habituales en representaciones pictóricas del pasado. Entre ellas, una calavera, una corona de espinas, ángeles o demonios.
Más retos
El siguiente reto es enseñar a estos sistemas de IA a interpretar conceptos abstractos en la pintura clásica europea. Un ejemplo sería que dos cuerpos desnudos más un ángel probablemente representan a Adán y Eva; o una paloma acompañada de un ángel y una persona al Espíritu Santo.
Además, la posibilidad de que los sistemas de IA sean capaces de detectar los objetos que aparecen en los cuadros ayudará al Museo del Prado y a otras instituciones del sector del patrimonio cultural a describir y clasificar sus obras de arte de forma automática. La idea con esto es facilitar la interpretación del significado de las pinturas.
«Gracias a esta iniciativa se podrán analizar las pinturas y detectar objetos que el visitante no haya percibido; descubrir relaciones entre sus elementos o interpretar su simbolismo; crear exposiciones virtuales con pinturas relacionadas de cualquier parte del mundo. Servirá de base para una nueva forma de estudiar y comprender nuestro patrimonio cultural«, explicó la investigadora del BSC María Cristina Marinescu.