Un nouveau dialogue avec l’art

CHIM, le chatbot du musée, montre par exemple comment les applications basées sur l’IA transforment aujourd’hui la médiation culturelle. Il a été testé et évalué entre autres au Städel Museum de Francfort.

Les responsables du projet unique de développement d’un chatbot muséal, récemment testé au Städel Museum de Francfort-sur-le-Main, souhaitent sortir de la communication à sens unique de la transmission classique d’informations dans le domaine culturel. Ce projet utilise l’intelligence artificielle (IA) émergente comme levier pour une forme innovante de médiation artistique. CHIM – le chatbot au musée – est le résultat d’une coopération entre Linon Medien AG et le Centre allemand de recherche en intelligence artificielle (DFKI) et est actuellement testé et évalué au Städel Museum. CHIM est un projet ambitieux qui illustre les possibilités actuelles offertes par les progrès de l’intelligence artificielle et l’utilisation de chatbots basés sur l’IA. Ces dernières années, les technologies telles que la réalité virtuelle (VR) et la réalité augmentée (AR) ont de plus en plus ouvert la voie aux dialogues interactifs dans les institutions culturelles. Ces technologies offrent diverses approches pour rendre les œuvres d’art plus accessibles dans l’espace numérique. Elles permettent d’enrichir les informations, d’adapter la mise en scène aux habitudes des utilisateurs et de créer une expérience multisensorielle. La disponibilité récente de ChatGPT, Google Bard et d’autres applications de dialogue basées sur l’IA élargit désormais les possibilités, mais apporte aussi son lot d’incertitudes.

Depuis 2019, Linon Medien et le DFKI travaillent au développement d’un système de dialogue apprenant pour la transmission de connaissances dans les musées. Le Städel Museum, en tant que partenaire éducatif de ce prototype de musée, met à la disposition du chatbot des informations en format texte et audio sur environ 300 objets de sa collection. L’objectif principal de CHIM est de fournir aux visiteurs des réponses individuelles et scientifiquement précises à leurs questions, que ce soit sur l’histoire de la création d’une œuvre d’art ou sur des détails spécifiques.
CHIM se distingue des assistants vocaux traditionnels par sa méthode spécialisée de reconnaissance et de traitement de la parole (Natural Language Understanding et Natural Language Processing). À l’instar du chatbot ChatGPT récemment publié par OpenAI, CHIM peut comprendre et générer du langage naturel. CHIM se base toutefois sur une base de données propre, valide et soigneusement élaborée. Des auteurs spécialisés ont créé plus de 700 commentaires audio en format texte et audio pour des objets sélectionnés au Städel Museum.
Les conservateurs les ont vérifiés afin de garantir une source d’information fiable et adaptée aux besoins des visiteurs. L’application et le site web “Fragen an die Kunst” ont été développés pour former le chatbot, permettant aux personnes intéressées de poser des questions ciblées sur des œuvres d’art spécifiques. Les technologies derrière le chatbot utilisent différents procédés pour relier les informations collectées et fournir une base de connaissances complète sur les œuvres d’art. L’intelligence artificielle peut ainsi répondre aux questions individuelles des visiteurs, que ce soit sur l’histoire de la création d’une œuvre d’art ou sur des aspects spécifiques de l’image. Pour les responsables, c’est là que réside l’originalité du chatbot pour la transmission des connaissances dans les musées : les médias conventionnels de la médiation artistique, tels que les applications d’audioguide ou les légendes, peuvent certes transmettre des informations sur l’œuvre, mais ils ne peuvent ni couvrir l’ensemble des connaissances disponibles sur une œuvre d’art, ni adapter ces informations aux attentes, aux intérêts et aux modes d’observation individuels de chaque spectateur. L’intelligence artificielle permet ici une interaction innovante et continuellement individualisée dans la transmission des connaissances sur les œuvres d’art.

Outre la transmission de connaissances, d’autres projets pilotes et champs d’application de l’IA dans le domaine de la culture apparaissent déjà – par exemple l’optimisation ciblée pour une offre culturelle plus attrayante et adaptée au groupe cible. Par exemple, certains musées utilisent des capteurs et des outils d’analyse IA pour analyser le comportement des visiteurs. Grâce à l’interprétation par l’IA des données collectées sur les modèles de mouvement et le comportement d’attention, les musées peuvent identifier les expositions et les œuvres d’art particulièrement attrayantes et celles qui attirent moins l’attention. Ces connaissances permettent aux institutions d’optimiser le placement des œuvres d’art et d’améliorer la conception globale des expositions. Dans ce contexte, l’IA peut également être utilisée pour fournir des recommandations personnalisées sur les œuvres ou les expositions susceptibles d’intéresser les visiteurs individuels, sur la base du profil des visiteurs et des interactions passées avec les œuvres d’art.
Toutefois, les possibilités d’utilisation de l’IA ne se limitent pas au domaine des expositions. L’IA peut également aider à identifier les œuvres d’art par la reconnaissance d’images et l’analyse de texte, à générer automatiquement des métadonnées, à traiter et à gérer les informations pour l’indexation, le catalogage et la gestion des collections. L’IA peut même jouer un rôle important dans la restauration, en révélant des dommages ou des altérations cachés dans les matériaux grâce à une analyse d’image et une reconnaissance de formes extrêmement précises. De plus, l’IA fournit de précieuses informations sur la composition des matériaux et l’application des couleurs, ce qui peut aider les restaurateurs à reconstruire et à préserver les œuvres d’art avec précision. Un exemple impressionnant est la reconstruction des parties latérales perdues du tableau “La Ronde de nuit” de Rembrandt. Les petits musées qui, en raison de leurs ressources humaines, professionnelles et financières, ne peuvent actuellement pas réaliser leurs propres analyses d’IA, peuvent également profiter des applications d’IA existantes – que ce soit pour la création de textes publicitaires et de médias sociaux ou pour l’amélioration de la communication interne au moyen d’applications Office. Un cas d’application intéressant pour ChatGPT a été repris par le Landesstelle für nichtstaatliche Museen in Bayern : Les musées peuvent utiliser ce chatbot basé sur l’IA pour vérifier l’efficacité de leur marketing numérique – par exemple la visibilité et la trouvabilité des données du musée.

L’association de l’art et de l’IA ouvre de nouvelles approches pour la médiation artistique et la gestion des musées. Mais certains défis doivent être relevés en cours de route. Les possibilités de traiter et d’interpréter des données à l’aide d’applications basées sur l’IA ne sont pas exemptes de critiques.
La qualité des données est essentielle, car les applications d’IA se basent toujours sur les données avec lesquelles elles sont entraînées. Les musées comme le Städel Museum, qui utilisent leurs propres jeux de données, doivent s’assurer que ceux-ci sont de haute qualité et fiables. Il est également important de s’assurer que ces données sont inclusives et exemptes de préjugés. En ce qui concerne la protection des données, les institutions doivent être en mesure de garantir que les informations collectées et traitées sur les visiteurs sont conformes à la législation sur la protection des données et suffisamment protégées. Si des applications basées sur l’IA, comme ChatGPT, sont utilisées et ne reposent pas sur des données propres, mais sur des données publiques non sécurisées de l’ensemble de l’Internet, d’autres facteurs doivent être pris en compte – les données collectées par l’IA peuvent être erronées, tout comme les réponses du chatbot, dont les réponses sont basées sur le croisement de ces informations selon le principe de probabilité.
L’expérience du Städel Museum montre clairement qu’il vaut la peine de se pencher sur les nouveaux potentiels de l’analyse de données basée sur l’IA et qu’il s’agit d’une étape significative pour rendre la médiation culturelle pertinente à l’avenir et permettre une large participation. En fonction des ressources disponibles, les musées doivent toutefois trouver des moyens appropriés pour utiliser leurs données dans le respect de la protection des données. Pour l’utilisation de systèmes basés sur l’IA avec des données publiques, il convient de privilégier les cas d’application qui ne soulèvent pas de questions de protection des données et de droits d’auteur, jusqu’à ce que la situation juridique dans ce domaine soit plus clairement définie.

Lire la suite : L’église Sainte-Cécile de Cologne sert aujourd’hui de musée Schnütgen et abrite une importante collection d’art médiéval, tout en conservant son caractère sacré.