Parlez

La première fois où j'ai entendu parler du POUSSE-POUSSE à ONOMATOPÉES était lors du 70ème anniversaire des Rencontres de Lure (dont je suis membre actif), en montrant à Pierre un petit programme que j'avais nommé Le Di Sciullo Numérique. C'était un logiciel qui avait pour volonté de placer le corps humain au centre de l'écriture numérique en reliant le temps de frappe à la taille du caractère et la hauteur de la voix à la couleur.

Les résultats étaient amusants et reprenaient la volonté de faire du texte typographié humain, ce pourquoi j'admire Pierre di Sciullo, qui est profondément inscrit dans ma pratique.

Suite à cela, il m'a présenté ce gros projet interactif qui a eu lieu à La Ferme du Buisson en 2005, dont voici le texte d'explication :

C'est une installation interactive multi-joueurs permettant d'écrire collectivement un texte « marabout-d’ficelle-de ch'val » en explorant les joies de la phonologie et de la typographie : comment ça se dit et comment ça s'écrit.

Le visiteur est invité à choisir une onomatopée, à la «cuisiner» pour la faire entrer dans le jeu et déclencher son énonciation. Le joueur intervient sur 6 dimensions de la parole : l'articulation (articulé, grommelé...), la hauteur (grave, aigu...), le rythme (lent, rapide...), l'accélération, le caractère (mou, rêveur...) et l'intensité (chuchoté, hurlé...).

En manipulant ces outils, le joueur pioche dans une base de données sonores. Une voix surgit, parmi celles occupant la vaste palette des tonalités et des timbres enregistrés en amont par deux chanteurscomédiens.

Chaque onomatopée a sa graphie en Kouije, un caractère spécialement dessiné pour suivre les ondulations de la parole.

Ici, cette typographie est un prototype pour tester le fonctionnement à trois variables correspondant à trois éléments captés de la voix ; les formes ne sont pas définitives.

J'aimerais, dans le cadre du postdiplôme, dessiner une typographie avec beaucoup plus de personnalité, comme l'Antique Olive, la Gill Sans, la Dunbar. Les formes trop rondes ne sont cependant pas idéales car difficiles à étirer en hauteur sans impacter la chasse du glyphe.

Ce projet induit également de créer un nouveau standard typographique qui permettrait à d'autres dessinateurs de caractères de produire pour le logiciel des polices.

Le back-end du projet se fait en partie grâce à une intelligence artificielle OPEN SOURCE nommée WhisperX, qui est un dérivé de Whisper créé par OpenAI en 2023.

Cette IA est particulièrement intéressante sur plusieurs points :

• Elle est totalement libre et gratuite.
• Elle peut tourner localement ou être installée sur des serveurs éthiques.
• Elle peut transcrire et traduire plus de 60 langues.
• Elle permet d'avoir des horodatages au mot près pour appliquer précisément le style typographique.
• Elle donne l'horodatage du début et de la fin du mot, ce qui permet de calculer la vitesse de parole de l'utilisateur.

La seconde partie du back-end consiste à la capture du volume et de la hauteur de la voix pour ensuite les appliquer au bon mot.