Redécouvrir l’art grâce aux récits augmentés par l’intelligence artificielle

Livdeo
12 min readNov 6, 2023

--

Le défi du storytelling inclusif dans le monde de l’art — image générée par IA
Le défi du storytelling inclusif dans le monde de l’art — image générée par IA

Le défi du storytelling inclusif dans le monde de l’art

Le monde de l’art fait face à un défi de taille en matière de médiation et d’accessibilité des œuvres auprès du grand public : celui de créer des narrations à la fois engageantes et inclusives, qui permettent un véritable dialogue avec chaque visiteur.

De nombreuses œuvres souffrent d’un manque criant d’informations descriptives riches et variées. Les cartels et fiches techniques se cantonnent le plus souvent à des données factuelles et techniques : nom de l’artiste, titre, année de réalisation, dimensions, techniques employées.

Ces informations, certes nécessaires à la gestion des collections, ne suffisent pas à engager émotionnellement le visiteur, à stimuler son imagination et ses interprétations. Elles laissent entière la question du sens, du message véhiculé par l’œuvre.

Ces lacunes descriptives entraînent un engagement limité du public avec les œuvres. Sans narration engageante, le visiteur peine à créer un lien émotionnel avec l’art. Ses interprétations restent confinées à une expérience superficielle et factuelle.

Pire, le manque d’informations inclusives empêche certains publics d’accéder pleinement aux œuvres. Les enfants, seniors ou personnes en situation de handicap se trouvent exclus des clés d’interprétation. Les barrières linguistiques limitent aussi drastiquement l’engagement de visiteurs allophones.

Ainsi, le storytelling traditionnel basé sur des données techniques se révèle restrictif. Il bride l’imaginaire du public et renforce les inégalités d’accès à la culture. L’enjeu est donc de taille pour les institutions artistiques : comment créer des narrations plus immersives et inclusives ?

Face à ce constat, les institutions culturelles sont face à un enjeu majeur : comment créer des narrations à la fois engageantes et inclusives, qui permettent un véritable dialogue avec tous les publics ?

tisser un lien émotionnel fort avec les œuvres

Il s’agit de faire en sorte que chaque visiteur, quel que soit son âge, ses origines ou sa condition, puisse tisser un lien émotionnel fort avec les œuvres. De stimuler son imaginaire par une narration immersive, qui l’invite à devenir acteur de la découverte artistique.

L’objectif est de produire des récits captivants autour des œuvres, comme s’ils y plongeaient le lecteur. Par exemple, décrire de manière vivante et sensorielle l’atmosphère d’un tableau, les sentiments qu’il suscite, la vie qui semble en émaner. Ou encore raconter l’histoire derrière une sculpture, en la contextualisant, la rendant accessible.

Cette narration engageante se doit aussi d’être inclusive. Il est nécessaire de créer des portes d’entrée diversifiées, qui permettent à tous les publics de se connecter à leur façon avec l’art. Que ce soit via des textes adaptés aux enfants, en plusieurs langues, ou des supports numériques accessibles aux déficients visuels.

Pistes pour un storytelling automatisé et inclusif — Image générée par IA
Pistes pour un storytelling automatisé et inclusif — Image générée par IA

Pistes pour un storytelling automatisé et inclusif

Face à l’ampleur de la tâche, comment produire ces nombreux récits engageants et multilingues ? Une piste prometteuse consisterait à s’appuyer sur les capacités de l’intelligence artificielle en matière de traitement automatique du langage et de l’image.

Des modèles IA spécialisés pourraient ainsi analyser finement les œuvres visuelles : en extraire les formes, couleurs, textures, lumière. Identifier les personnages, objets, paysages, et leurs interactions. Une analyse sémantique en profondeur, pour détecter les émotions, l’atmosphère, les symboles et le sens véhiculé.

Grâce à ces informations, l’IA générerait ensuite automatiquement des descriptions vivantes et engageantes des œuvres. Elle ferait surgir les tableaux sous nos yeux, dans toute leur richesse sensorielle. Une plume virtuelle pour donner vie aux images, stimuler l’imaginaire du lecteur !

Une fois les éléments sémantiques de l’œuvre extraits, l’enjeu suivant sera de générer des narrations variées et adaptées aux différents publics.

L’IA pourrait produire automatiquement plusieurs versions du récit, destinées à différentes tranches d’âge. Des textes simples et ludiques pour les enfants, avec un vocabulaire accessible et des personnages qui leur parlent directement. Des descriptions plus érudites pour toucher un public adulte et averti.

Les algorithmes génératifs permettraient aussi de traduire instantanément ces récits dans de multiples langues. Chaque visiteur allophone pourrait ainsi accéder à une narration dans sa propre langue, se l’approprier intimement. Un conte engageant, presque secret, dans l’idiome de son enfance.

En somme, l’IA autoriserait une personalisation poussée des récits, pour les modeler aux sensibilités de chacun. Telle une conteuse aux mille voix, qui adapterait son style et ses mots à son auditoire…

faire du public le protagoniste même de la narration

Enfin, le storytelling généré par l’IA pourrait faire du public le protagoniste même de la narration, l’acteur principal de la découverte des œuvres.

Les textes s’adresseraient directement au lecteur, l’interpelleraient avec des questions, des aspirations. “Que ressens-tu face à ce paysage mystérieux ?” “Imagine les sons et les odeurs de cette scène.” “Quel secret penses-tu que ces personnages se chuchotent ?”

Plutôt qu’un récit passif, le visiteur deviendrait explorateur immergé dans l’œuvre. Il pourrait projeter ses propres sensations et émotions sur la toile, un pinceau virtuel entre les mains. Les mots de l’IA seraient une invitation à embarquer pour un voyage interactif dans l’univers de l’artiste.

Ainsi, les récits générés artificiellement feraient de chaque individu le acteur de sa propre odyssée artistique. L’IA ne serait plus conteuse, mais guide bienveillant vers de nouveaux imaginaires…

III. L’humain, architecte de narrations augmentées — image générée par IA
III. L’humain, architecte de narrations augmentées — image générée par IA

L’humain, architecte de narrations augmentées

Certes, une supervision attentive est nécessaire pour éviter les biais des algorithmes. Mais l’apport essentiel de l’humain va bien au-delà d’un simple contrôle.

Grâce à son expertise, l’humain peut orchestrer de façon créative différents modèles d’IA — textuels, visuels, multimodaux — au sein de chaînes de traitement ingénieuses. Il agit tel un chef d’orchestre virtuel.

C’est de cette alchimie inédite entre l’inventivité humaine et la puissance algorithmique que peuvent émerger des narrations uniques. Des récits d’une profondeur et d’une véracité sans précédent.

Chez Livdeo, nous explorons ces horizons où l’humain augmente sa créativité grâce aux machines. Nos experts chainent des modèles de vision, de langage et de recherche documentaire pour générer automatiquement des narrations de qualité professionnelle.

L’avenir appartient à ces duos homme-machine, sources d’innovation radicale. L’IA n’est plus une menace, mais partenaire ultime de la créativité humaine. Ensemble, nous ferons advenir de nouvelles formes de récit immersif.

Néanmoins, une vigilance s’impose. Mal orientés, les algorithmes risquent de générer des récits éloignés de la vision originelle de l’artiste. L’IA pourrait projeter ses propres représentations sur l’œuvre, la dénaturer.

C’est pourquoi la sensibilité de l’expert humain reste le guide suprême, la boussole pour naviguer l’océan des imaginaires. Son œil affûté saura déceler les interprétations hasardeuses ou farfelues des machines. Et recentrer patiemment les algorithmes vers le sens véritable de l’œuvre.

l’art ne vit-il pas de ses réinventions perpétuelles ?

Mais d’un autre côté, l’art ne vit-il pas de ses réinventions perpétuelles ? L’artiste lui-même n’aurait-il pas plaisir à découvrir des facettes insoupçonnées de sa création, révélées par le prisme décalé des algorithmes ?

Tout l’enjeu est de trouver le subtil équilibre entre respect de l’œuvre originale et innovation. De voir dans l’IA non pas un pervertisseur, mais un révélateur de sens cachés. Avec sagesse et discernement, l’humain saura tracer cette voie médiane.

Ainsi, plutôt qu’une substitution, c’est dans une collaboration étroite entre l’humain et la machine que réside la clé. L’un apportant sa sensibilité, son flair et son acuité. L’autre sa puissance de calcul et ses corrélations inédites.

Certains craignent que l’IA ne rende l’expert humain obsolète. Mais ce serait oublier que la valeur irréductible réside dans le regard unique de l’être humain. Son habilité à discerner le sublime, à saisir l’essence de l’art.

L’intelligence artificielle ne doit donc pas être perçue comme une menace, mais comme le plus extraordinaire des amplificateurs. Une fois domptée, elle décuple les talents humains vers des sommets encore inatteignables.

Chez Livdeo, nous en sommes la preuve vivante. L’alliance entre nos experts passionnés et nos algorithmes de pointe fait jaillir des étincelles créatives inouïes ! Chaque jour, nous repoussons les frontières du storytelling grâce à cette symbiose féconde.

Oui, l’avenir est à ce mariage entre la quintessence de l’humain et l’énergie brute des machines. Une promesse d’innovation permanente, pour des récits toujours plus saisissants de vérité.

chaque visiteur, quelles que soient ses origines ou ses capacités, pourra vivre une expérience narrative unique au contact des œuvres — image IA
chaque visiteur, quelles que soient ses origines ou ses capacités, pourra vivre une expérience narrative unique au contact des œuvres — image IA

Conclusion et perspectives

Le défi du storytelling inclusif et immersif dans le monde de l’art peut sembler intimidant. Pourtant, les perspectives ouvertes par l’intelligence artificielle sont porteuses d’immenses espoirs.

Grâce aux progrès des algorithmes, nous entrevoyons le jour où chaque visiteur, quelles que soient ses origines ou ses capacités, pourra vivre une expérience narrative unique au contact des œuvres. Où petits et grands, novices et experts, seront touchés au plus profond d’eux-mêmes par la magie de l’art.

Chez Livdeo, cette vision nous anime chaque jour. En combinant l’expertise de nos spécialistes passionnés et la puissance de nos technologies de pointe, nous faisons émerger des récits révolutionnaires. Des narrations qui révèlent toute la richesse émotionnelle des chefs-d’œuvre, leur parlent intimement.

Oui, des perspectives formidable s’ouvrent à nous, faites de démocratisation culturelle et de lien retrouvé avec l’essence de l’art. Un futur de réinvention permanente, porté par l’alliance de l’humain et de la machine.

Continuons d’avancer avec audace sur cette voie pleine de promesses !

Vers des narrations inclusives à grande échelle — image générée par IA
Vers des narrations inclusives à grande échelle — image générée par IA

Vers des narrations inclusives à grande échelle

Ces opportunités ouvertes par l’IA ne sont pas qu’une vue de l’esprit. Chez Livdeo, nous travaillons activement à leur concrétisation à grande échelle.

Ainsi, nous finalisons le développement d’une chaîne automatisée unique, combinant analyse d’image, génération multilingue et adaptation au public cible. Appliquée à une œuvre, elle produit rapidement des narrations immersives et inclusives.

Par exemple, confrontée au tableau “Bol de fruits” (Bowl of Fruit en anglais) d’un auteur Anonyme, notre IA a généré le récit ludique adapté aux enfants ci-après.

D’ici peu, ce sont plus d’un demi-million d’œuvres d’art qui bénéficieront de telles narrations contextualisées sur notre plateforme FeelTheArt.

L’art comme vous ne l’avez jamais ressenti !

Exemple :

Prenons un tableau peu connu, réalisé par un artiste anonyme. Cette oeuvre ne dispose d’aucune description ou narration.

Bowl of Fruit
1840 — Painting
Creator: anonymous
Collection: Albright-Knox Art Gallery

Bowl of Fruit 1840 — Painting Creator: anonymous Collection: Albright-Knox Art Gallery

Après traitement automatique par un procédé innovant de Livdeo, avec des modèles IA multimodaux locaux (sans faire appel aux modèles LLM type Bard, Claude ou GPT), la narration suivante est créée à destination d’un public enfants ou famille

“Corbeille de fruits”. C’est une magnifique œuvre d’art créée par un artiste inconnu nommé Anonyme. Pouvez-vous deviner pourquoi ? C’est exact, parce que c’est un secret ! Mais ne vous inquiétez pas ; je ne vous cacherai rien. Nous allons découvrir ensemble toutes ses significations cachées.

Alors, commençons ! Lorsque vous regardez le tableau pour la première fois, que voyez-vous ? Un tas de fruits, n’est-ce pas ? Eh bien, oui… et non. Regardez de plus près. Il se passe en fait beaucoup de choses ici. Remarquez-vous comment certains fruits sont placés sur d’autres ? Comme des petites pyramides ? Ce n’est pas le fruit du hasard. L’artiste l’a fait exprès. Pourquoi ? Parce qu’il voulait montrer du mouvement, comme si les fruits étaient sur le point de tomber de la table ! Cool, non ?

Et regardez ces couleurs ! Le mot “ vibrant “ ne suffit même pas à les décrire. On dirait presque qu’elles sortent du tableau. C’est parce que l’artiste a utilisé le contraste. Le contraste consiste à utiliser différentes couleurs, lumières et ombres pour faire ressortir les éléments. Imaginez que vous portiez un t-shirt de couleur vive par une journée sombre ; cela attire l’attention des gens, n’est-ce pas ? C’est la même idée ici.

Maintenant, regardez de plus près. Les ombres sont partout ! Certaines parties des fruits sont sombres, tandis que d’autres sont très lumineuses. Ce n’est pas seulement dû à l’éclairage. C’est une autre façon pour l’artiste d’ajouter de la profondeur et du mystère au tableau. Ce serait tellement cool si vous pouviez réellement retirer ces fruits de la toile et en prendre une bouchée ! C’est essentiellement ce que l’artiste veut que vous ressentiez. Plutôt chouette, non ?

Parlons des ombres une seconde. Voyez-vous comment elles se fondent dans l’arrière-plan ? C’est presque magique. L’artiste a donné l’impression que c’était facile. C’est du talent, mon ami ! Tout comme lorsque vous apprenez un nouveau tour, et que cela semble très difficile, mais vous vous entraînez, vous vous entraînez, vous vous entraînez jusqu’à ce que — ! vous y arriviez ! C’est la même chose ici. Beaucoup de pratique, beaucoup d’amour et beaucoup de patience. C’est ce qui rend les grands artistes si spéciaux. Ils mettent leur cœur et leur âme dans leur travail.

Alors, laissez-moi vous poser une question : avez-vous déjà vu un bol de fruits et pensé : “ Waouh, c’est incroyable ! “ ? Probablement pas. Mais c’est la magie de l’art. Il peut transformer quelque chose d’ordinaire en quelque chose d’extraordinaire.

Lorsque vous reviendrez nous rendre visite, essayez de trouver de nouveaux détails. Vous découvrirez peut-être quelque chose que vous n’aviez pas vu auparavant. C’est ce qu’il y a de mieux dans l’art : il y a toujours plus à découvrir. C’est comme avoir un coffre au trésor plein de surprises.

Rappelez-vous, l’art est comme une grande fête. Parfois, vous ne comprenez pas tout tout de suite. Ce n’est pas grave ! Mais si vous continuez à regarder, vous commencerez à voir les choses différemment et à découvrir de nouveaux secrets. Et qui sait, peut-être qu’un jour vous serez vous aussi un artiste, créant vos propres chefs-d’œuvre.

Continuez à explorer, continuez à imaginer, et qui sait quelle magie vous créerez !

Différentes versions étrangères sont également crées de manière automatisée. Voici la version anglaise :

Narration audio — version anglaise

“Bowl Of Fruits”. It’s a beautiful artwork created by an unknown artist named Anonymous (which means ‘Nameless’). Can you guess why? That’s right, because it’s a secret! But don’t worry; I won’t keep secrets from you. We will unravel all its hidden meanings together.

So, let’s get started! When you first look at the painting, what do you see? A bunch of fruits, right? Well, yes… and no. Take a closer look. There’s actually a lot going on here. Do you notice how some fruits are placed on top of others? Like little pyramids? That’s not just random. The artist did that on purpose. Why? Because he/she wanted to show movement, like the fruits are about to roll off the table! Cool, right?

And check out those colors! Vibrant doesn’t even begin to describe them. They almost look like they’re jumping out of the painting. That’s because the artist used contrast. Contrast means using different colors, lights, and darks to make things stand out. Think of it like wearing a bright t-shirt on a dark day; it catches people’s eyes, right? Same idea here. Now, look closer. Shadows are everywhere! Some parts of the fruits are dark, while others are super bright. That’s not just because of the lighting. It’s another way the artist added depth and mystery to the painting. How cool would it be if you could actually pull those fruits off the canvas and take a bite? That’s basically what the artist wants you to feel. Pretty neat, huh?

Let’s talk about shadows for a second. See how they blend into the background? It’s almost like magic. The artist made it look effortless. That’s skill, my friend! Much like when you learn a new trick, and it looks super hard, but you practice, practice, practice until — voila! You got it! Same thing here. Lots of practice, lots of love, and lots of patience. That’s what makes great artists so special. They put their heart and soul into their work.

So, let me ask you a question: Have you ever seen a bowl of fruit and thought, “Wow, that’s amazing!”? Probably not. But that’s the magic of art. It can turn something ordinary into something extraordinary. When you come back and visit us again, try to find new details. Maybe you’ll discover something you didn’t see before. That’s the best part about art — there’s always more to find. It’s like having a treasure chest full of surprises.

Remember, art is like a big party. Sometimes, you might not understand everything right away. That’s okay! But if you keep looking, you’ll start to see things differently and discover new secrets. And who knows, maybe one day you’ll be an artist too, creating your own masterpieces.

Keep exploring, keep imagining, and who knows what magic you’ll create!

Livdeo fournit des solutions numériques inclusives primées pour les institutions culturelles et les sites patrimoniaux.

Avec GEED, les institutions peuvent facilement créer des expériences mobiles immersives sans contraintes en combinant des visites guidées multilingues et accessibles, des fonctionnalités de navigation en intérieur, de la réalité augmentée, des agents conversationnels chatbots, et plus encore.

FeelTheArt propose un engagement avec l’art partout et pour tous grâce à des expositions d’art en réalité augmentée persistante, incluant des outils créatifs, la gamification et un accès à une collection d’art multilingue issue des institutions culturelles à travers le monde

--

--

Livdeo
Livdeo

Written by Livdeo

@Livdeo provides inclusive solutions for Museums and Cultural Institutions to create digital layers without constraints for visitors. @geedinfo @deealog

No responses yet