Stateful Viewers
Stateful Viewers est un projet d'art et de recherche qui simule la visite d'une galerie. Un modèle vision-langage réfléchit aux images une à une, en portant en lui mémoire, attention et affect, de sorte que chaque rencontre façonne subtilement la perception des images suivantes.
Plutôt que de traiter les images comme des entrées indépendantes, le système modélise l'expérience du regard comme un processus continu et cumulatif.
Expérimenter la démo
Voir le code source
Positionnement de recherche
Le projet se situe à l'intersection de la pratique artistique et de la modélisation computationnelle de l'expérience esthétique.
Stateful Viewers s'appuie sur la théorie de la réception, la phénoménologie et la psychologie esthétique. Il modélise la posture perceptive du regardeur avant la rencontre avec l'image, maintient une voix expressive stable d'une image à l'autre et considère la réponse émotionnelle comme un processus qui se déploie dans le temps.
Le système opérationnalise des théories qualitatives de l'expérience esthétique dans un cadre génératif, sans réduire l'expérience à des scores numériques ni à des catégories émotionnelles fixes.
Là où l'informatique affective demande souvent quelle émotion est présente, Stateful Viewers s'interroge sur ce que signifie faire l'expérience de cette image, après avoir déjà fait l'expérience des précédentes.
Processus de visionnement avec état
Chaque regardeur possède un Profil (dispositions perceptives), un Style de réflexion (voix expressive) et un État interne évolutif (condition intérieure momentanée). Pour chaque image, le modèle est conditionné par l'image ainsi que par ces attributs du regardeur, et produit à la fois une Réflexion et un État interne mis à jour. Cet état mis à jour est reporté sur l'image suivante, créant une trajectoire expérientielle continue au fil des rencontres.
Profil du regardeur
Le profil décrit des dispositions perceptives et interprétatives stables — la manière dont cette personne porte habituellement attention aux images, les traite et en construit le sens. Il est défini selon sept dimensions.
Voir les dimensions
- Tolérance à l'ambiguïté — confort avec l'incertitude et l'interprétation ouverte
- Style attentionnel — absorbé/contemplatif ↔ balayant/fébrile
- Orientation incarnée — somatique ↔ cognitive
- Posture interprétative — littérale/descriptive ↔ symbolique/associative ↔ autobiographique
- Conditionnement esthétique — naïf ↔ fortement conditionné, avec formation artistique
- Posture motivationnelle — recherche de défi/nouveauté ↔ recherche de confort/familiarité
- Tendance à l'intégration mnésique — intégrative/cumulative ↔ discrète/remise à zéro
Style de réflexion
Indépendant du profil, le style de réflexion définit la manière dont l'expérience est exprimée en langage — la texture, le rythme et les habitudes du discours intérieur. Il est défini selon sept dimensions.
Voir les dimensions
- Registre lexical — courant/conversationnel ↔ littéraire/poétique
- Explicitation de l'émotion — implicite/suggérée ↔ explicite/nommée
- Stabilité de la voix — stable/composée ↔ fragmentée/changeante
- Modalité sensorielle dominante — visuelle, kinesthésique, auditive ou mixte
- Mode d'autoréférence — première personne intime ↔ observationnel/impersonnel
- Densité métaphorique — sobre/littéral ↔ riche/figuré
- Rythme — condensé/laconique ↔ ample/fluide
État interne initial
Avant toute rencontre avec les images, le système génère un état interne initial — un instantané de l'état intérieur du regardeur au moment où il entre dans la galerie. Cet état est exprimé selon sept dimensions qualitatives qui évolueront au fil du temps.
Voir les dimensions
- Humeur dominante — ex. : calme, agité, mélancolique, alerte, nostalgique
- Tension ou aisance sous-jacente — la texture ressentie sous l'humeur de surface
- Énergie et engagement — épuisé/fatigué ↔ énergisé/prêt
- Ouverture émotionnelle — gardé/défendu ↔ réceptif/perméable
- Focalisation attentionnelle — étroite/concentrée ↔ diffuse/errante
- Pression de construction de sens — forte pression pour comprendre ↔ laisser-être
- Activation somatique — corps à peine présent ↔ intensité corporelle immédiate
Réflexions avec état
Chaque réflexion est générée à partir du profil du regardeur, du style de réflexion et de l'état interne courant. Après chaque image, l'état interne est mis à jour pour l'étape suivante — le plus souvent par de légers déplacements, sauf lorsqu'une image produit une perturbation plus forte.
La première image commence depuis l'état interne initial ; chaque image suivante commence depuis l'état transmis par la réflexion précédente.
Parce que les mêmes sept dimensions sont maintenues d'une étape à l'autre, de petites variations peuvent s'accumuler et former des trajectoires expérientielles significatives.
Résumé de trajectoire
Les sessions de réflexion peuvent être considérées comme des trajectoires expérientielles — des parcours ordonnés de l'état interne à travers une galerie. La fonction « Résumer la trajectoire » permet d'obtenir un court résumé narratif de la manière dont l'expérience évolue (par exemple : apaisement graduel, oscillation, intensification, épuisement).
L'analyse demeure qualitative et phénoménologique, sans réduction à des axes valence–activation ni à des scores de sentiment.
Pourquoi cela compte
En modélisant la manière dont la perception évolue à travers une séquence d'images, Stateful Viewers permet d'étudier, de comparer et de concevoir des trajectoires d'expérience esthétique — plutôt que de se limiter à des réactions isolées à des œuvres individuelles.
Cela ouvre un espace pour de nouvelles formes d'expérimentation artistique, ainsi que pour des recherches computationnelles sur le rôle de la mémoire, de l'attention et de l'affect dans la construction du sens au fil du temps.