Laquelle de ces 5 séquences représente le mieux la chanson « Happy Birthday to you » ?
Dans la figure ci-dessus, la séquence 1 est la partition, c’est-à-dire un codage de la chanson ; la séquence 2 est un codage amélioré qui « représente » au sens mathématique du terme les 4 phrases musicales mais en restant proche de la partition ; la séquence 3 présente des images qui évoquent les anniversaires mais sans se soucier d’épouser les formes de la musique ; la séquence 4 est extraite d’une interprétation par Media Player ; la séquence 5 est le produit d’une analyse des signaux sonores et visuels à partir de leur numérisation.
Le site explore les liens entre musique, formes en deux ou trois dimensions, images, photographies, odeurs et goûts. Il présente des résultats obtenus par des techniques d’appariement de matrices de distances et de plongements sémantiques inspirés de l’intelligence artificielle générative.