Hearing Glass: Synaesthetic Correspondences in The Musical Practice

Dit onderzoek heeft tot doel het artistieke gebruik van interzintuiglijke metaforen met betrekking tot visuele kleur en geluid in interdisciplinaire kunstcreatie te onderzoeken, en de muzikale uitvoeringspraktijk te verbeteren door synesthesie en het verband tussen op kleur gebaseerde en muzikale percepties te onderzoeken.

Synesthesie is een neurologische aandoening waarbij een persoon bijvoorbeeld onwillekeurig een bepaalde kleur kan zien bij het horen van een noot. Wetenschappelijk bewijs suggereert dat voorkeuren voor het combineren van bepaalde kleuren met aspecten van muziek op een vergelijkbare manier in onze hersenen kunnen zijn vastgelegd. De artistieke toepassingen hiervan zijn nog niet uitgebreid onderzocht.

Het onderzoek zal worden uitgevoerd in overleg met mensen met expertise op het gebied van neurowetenschap en kunst, door onderzoek naar het gebruik van kleur en geluid in muziek, experimenten naar cognitieve en artistieke effecten van kleurelementen op muzikale uitvoeringen en analyse van geselecteerde werken. De output zal bestaan uit een proefschrift, softwaretools om interzintuiglijke principes te integreren in muziekpraktijken, workshops en de creatie van een audiovisueel werk waarin dergelijke principes worden gedemonstreerd.

Onderzoeksvragen:
- Welke muzikale interzintuiglijke elementen correleren binnen de werken van synesthetische en niet-synesthetische componisten?
- Wat zijn de cognitieve en artistieke voordelen van het gebruik van op kleur gebaseerde en synesthetische elementen in de muziekpraktijk?
- Hoe kunnen we de cognitieve elementen van kleur-muzikale perceptie toepassen in de analyse en creatie van audiovisuele kunst?

Het einddoel is het creëren van een theoretisch model voor de analyse en creatie van audiovisueel werk. Dit omvat softwaretools die audiovisuele prestaties mogelijk maken (zoals live visualisatie van audio op basis van synesthetische principes en vice versa) gemaakt in de programmeeromgeving Max/MSP/Jitter.

De Koninklijke Academie van Antwerpen en de International Association of Synesthetes worden uitgenodigd om actief mee te werken aan dit project. (Curriculumklassen, onderzoeksfestivals, creatieve projecten.) Verdere publicaties en artikelen op basis van de resultaten van de cognitieve experimenten en audiovisuele analyses, bedoeld voor een publiek met verschillende expertiseniveaus over het onderwerp, zullen worden geschreven voor FORUM+, The Journal for Artistic Onderzoek en studies in beeldende kunst en communicatie.

De educatieve rol van het gebruik van intrinsieke kleur-geluidrelaties zal worden overwogen. (Publicaties, workshops gericht op studenten.) Er zal een nieuw audiovisueel werk ontstaan als artistieke output. Het werk wordt geschreven voor een ensemble en vertellers met live elektronica. De belangrijkste focus zal zijn om het effect en het potentieel van de intrinsieke relatie tussen geluid en kleur te demonstreren met behulp van live elektronische middelen.

De creatie en uitvoering van dit werk komt tot stand in samenwerking met het interdisciplinaire kunstcollectief 4Fold en het theatercollectief Mixed & United.