Le contexte expérimental

Deux musiques simples – Happy Birthday to You et Jeux Interdits – et trois ensembles de photos – des photos de fleurs, d’une petite fille et de paysages enneigés – ont permis de confronter dix sujets à 6 tâches différentes : constituer pour chaque coupe musique- ensemble de photos une bandelette musicale.

Ci-dessous les trois bandelettes musicales construites par notre algorithme sur Jeux Interdits.

L’exercice s’est révélé périlleux comme attesté par les commentaires faits par les personnes interrogées, par le temps mis pour construire les bandelettes et les hésitations observées. Ceci est facile à imaginer compte tenu de la charge cognitive des tâches ; il faut gérer de nombreuses photos conjointement avec des segments musicaux et ceci est complexe.

Les résultats

Les résultats observés sont instructifs ; les sujets font des choix très différents de ceux proposés dans les ajustements optimaux présentés ci-dessus.

• Lorsque des segments musicaux sont proches, les sujets ont tendance à associer des images plus similaires. Ceci est surtout observé pour Jeux Interdits mais doit être confirmé car la tendance est peu marquée.
• Les personnes testées auraient préféré associer une ou plusieurs images à l’ensemble de la musique, sans vouloir en épouser la progression. C’est du reste ce qu’ils ont implicitement fait semble-t-il car on retrouve des photos similaires dans toutes les séquences sélectionnées par les sujets mais à des moments musicaux différents.
• Les airs retenus sont connotés et ces connotations sont déterminantes. Happy Birthday to You évoque un moment heureux. Les cactus qui suggèrent la douleur n’ont jamais été choisis alors que l’algorithme en avait retenu deux.
• Il existe probablement un effet d’amorçage. Les choix de la première et de la deuxième photos revêtent un caractère partiellement arbitraire (choix d’une origine et d’une unité), un peu comme choisir pour interpréter un air une tonalité ou un instrument. Ceci est corroboré par la diversité des photos choisies pour représenter les deux premiers segments musicaux, particulièrement pour les paysages enneigés.
• Les commentaires formulés par les sujets à l’issue de l’exercice confirment cependant les hypothèses de base de ce travail. Des humeurs, des états d’âme, des ressentis traversent les mondes auditifs et visuels et peuvent servir à établir des associations. Lorsqu’interrogées sur ce qui a motivé leurs choix, les personnes mentionnent par exemple des émotions, des ambiances : « Happy birthday c’est la joie comme le rouge », « les fleurs fanées sont tristes comme la fin de Jeux interdits », « les photos les plus lumineuses sont associées aux morceaux les plus forts », « la musique comme une expression du visage peut être pensive », « les sous-bois plus sinistres correspondent à un passage plus mélancolique dans Jeux Interdits », « les progressions dans les sourires rappellent les crescendo musicaux », « la douceur de la musique s’accommode mal du piquant des cactus ».