L'invention du chromosound

Défis pour le développement d'un langage possible

Auteurs

  • Sergio Basbaum Programa de Pós Graduação em tecnologias da inteligência e design digital TIDD Pontifícia Universidade Católica de São Paulo Depto de Computação

DOI :

https://doi.org/10.5007/1807-9288.2023.e96079

Mots-clés :

Chromossound, Chromossonia, Chromossonium, synesthésie, esthétique du Dôme, cognition, réseaux de neurones

Résumé

Cet article décrit le Chromossonium, le projet d'un environnement interactif conçu pour accueillir des performances de Chromossonia, un langage synesthésique pour la performance et la composition. Chromossonia est basé sur une particule théorique nommée Chromossound, qui unit le son et la couleur de manière non hiérarchique, et avec laquelle nous attendons des créateurs qu'ils soient capables de composer des pièces musicales qui seront mises en scène et interprétées dans le Chromossonium. Après une description de la manière dont ces éléments sont conçus et quelles sont leurs exigences théoriques, l'article discute des nombreuses directions potentielles de recherche qu'offre le projet et des promesses qu'il apporte. Nous discutons ensuite des défis techniques que nous avons rencontrés lors du processus de mise en œuvre, en choisissant de générer le Chromossound comme sortie d'un réseau neuronal, selon certains choix techniques et une architecture définie.

Références

ABBADO, Adriano: Visual music Masters - abstract explorations: history and contemporary research. Milano: Skira, 2017.

ANTUNES, Jorge: A correspondência entre os sons e as cores. Brasilia: Thesaurus. 1982.

BASBAUM, Sérgio: Fundamentos da Cromossonia: sinestesia, arte e tecnologia. (Master's dissertation). Pontifícia Universidade Católica de São Paulo, 1999.

BASBAUM, Sérgio: Sinestesia, arte e tecnologia: fundamentos da cromossonia. São Paulo: Annablume/FAPESP, 2002.

BASBAUM, Sérgio: O primado da percepção e suas consequências no ambiente midiático. São Paulo: Intermeios/FAPESP, 2016.

BASTOS, Marcus; MORAN, Patricia: Audiovisual ao vivo: tendências e Conceitos. São Paulo, Intermeios, 2021.

BOSSEUR, Jean-Yes: Sound and the visual arts. Paris: Dix Voir, 1993.

CYTOWIC, Richard: Synesthesia: phenomenology and neuropsychology. in BARON-COHEN, Simon e HARRISON, John: Synesthesia: classic and contemporary readings. Oxford: Blackwell Publishers, 1997.

EISENSTEIN, Sergei: Film Form – essays in film theory. New York: Harvest Books, 1949.

FERREIRA MH, RENOVATO Tobo P, BARRICHELLO Cr, GUALTIERI M: Olfactory interference on the emotional processing speed of visual stimuli: The influence of facial expressions intensities. PLoS ONE 17(5): e0264261. https://doi.org/10.1371/journal.pone.0264261, 2022.

FULKERSON, Matthew: Rethinking the senses and their interactions: the case for sensory pluralism. Frontiers in Psychology | Consciousness Research - December 2014 | Volume 5 | Article 1426, 2014.

LUNDBORG, Goran (2014): The Hand and the Brain - From Lucy's Thumb to the Thought- Controlled Robotic Hand. London: Spinger-Verlag.

PEACOCK, Kenneth: Instruments to perform Color Music. LEONARDO, Vol. 21, No. 4, pp. 397-406, 1988.

MCDONNELL, Maura: Visual music – a composition of the ‘things themselves’. https://www.academia.edu/525221/Visual_Music_A_Composition_Of_The_Things_Themselves (undated).

MARKS, Lawrence E.: On Colored-Hearing Synesthesia: Cross-Modal Translations of Sensory Dimensions. Psychological Bulletin. VOL. 82, No. 3 MAY 1975.

MERLEAU-PONTY, Maurice: Phenomenology of Perception. New York: Routledge, 2012.

POUND, Ezra: ABC or Reading. London: Faber and Faber, 1961.

RAMACHANDRAN, V. S.; HUBBARD, Edward: Synaesthesia – a Window to Perception Thought and Language. Journal of Consciousness Studies, v. 8, n. 12, p. 3-34, 2001.

RUTHROF, Horst: Semantics and the Body - Meaning from Frege to the Post Modern. Toronto: Toronto University Press, 1997.

TOZZO DE DEUS, Alexandre; NESPOLI, Eduardo: Luteria digital experimental: singularização de instrumentos musicais em contexto pós-industrial. Revista Tecnologia e Sociedade. V. 16, No 45, 2020.

WHITNEY, John: To paint on water: the audiovisual duet of complementarity. Computer Music Journal 18, num 3, Cambridge: MIT Press, 1994.

WHITNEY, John: Digital Harmony. Peterborough: Byte Books, 1980.

Téléchargements

Publiée

2023-12-20

Numéro

Vol. 19 No 2 (2023)

Rubrique

Articles ou Essais

Licence

(c) Tous droits réservés Sergio Basbaum 2023

Creative Commons License

Ce travail est disponible sous la licence Creative Commons Attribution 4.0 International .

Les auteurs publiant dans Texto digital donnent leur accord aux dispositions suivantes :

1. Ils conservent les droits d'auteur pour les publications ultérieures, tout en accordant à Texto digital les droits pour la première publication selon les termes de la Licence Creative Commons - Attribution 4.0 international.

2. La Licence Creative Commons - Attribution 4.0 international permet de copier et de redistribuer le matériel sur tout support ou format, ainsi que faire des adaptations, pour toute finalité.

3. Il est autorisé aux auteurs d’assumer d’autres engagements visant à la distribution de la version du document publié par Texto digital dans d’autres plate-formes, tels un répositoire institutionnel ou même un livre collectif, pourvu qu’on y fasse informer explicitement les références de la publication originale dans notre revue.