Instrument Qualia, Timbre Trait Profiles, and Semantic Orchestration Analysis
Title: Instrument Qualia, Timbre Trait Profiles, and Semantic Orchestration Analysis
Authors: Lindsey Reymore (McGill University)
Conference: Spatialization, Orchestration, Perception. IRCAM Forum Workshops hors les murs, Montreal (Online) February 4–5–6 and 11–12, 2021
Source URL: https://www.ircamforummontreal.org/table-ronde-1/#reymore_video
ABSTRACT
I present a method of computational orchestration analysis built from empirical studies of timbre semantics. In open-ended interviews, 23 musicians were asked to describe their phenomenal experiences of the sounds of 20 Western instruments. A content analysis of the transcribed interviews suggested 77 qualitative categories underlying the musicians’ descriptions. In a second study, 460 musician participants rated subsets of the same 20 instruments according to these 77 categories. Principal Component Analyses and supplementary polls produced a final 20-dimensional model of the cognitive linguistics of timbre qualia. The model dimensions include: rumbling/low, soft/singing, watery/fluid, direct/loud, nasal/reedy, shrill/noisy, percussive, pure/clear, brassy/metallic, raspy/grainy, ringing/long decay, sparkling/brilliant, airy/breathy, resonant/vibrant, hollow, woody, muted/veiled, sustained/even, open, and focused/compact. In a third study, 243 participants rated subsets of a group of 34 orchestral instruments using the 20-dimensional model. These ratings were used to generate Timbre Trait Profiles, which serve as the foundation for the orchestration analysis method, for each of these instruments. A computational program is under development (anticipated Feb-March 2020) to generate a semantic orchestration plot given a musical piece as input. The analysis will provide information on how the semantic dimensions of timbre evolve throughout a work, initially using a model that combines Timbre Trait Profiles accordingly from orchestration and employs intensity modifiers based on dynamic indications. In addition to the semantic orchestration plots, I aim to translate musical data into a real-time, animated visual analysis that can be played along with the piece to illustrate dynamic timbral changes resulting from orchestration.
Je présente une méthode d'analyse d'orchestration computationnelle construite à partir d'études empiriques de la sémantique du timbre. Dans le cadre d'entrevues ouvertes, 23 musiciens ont été invités à décrire leur expérience phénoménale des sons de 20 instruments occidentaux. Une analyse du contenu des entrevues transcrites a permis de dégager 77 catégories qualitatives qui sous-tendent les descriptions des musiciens. Dans une deuxième étude, 460 musiciens participants ont évalué des sous-ensembles des mêmes 20 instruments en fonction de ces 77 catégories. Les analyses en composantes principales et les sondages supplémentaires ont produit un modèle final en 20 dimensions de la linguistique cognitive de la qualia du timbre. Les dimensions du modèle sont les suivantes : grondement/faible, doux/chantantant, aqueux/fluide, direct/fort, nasal/rouge, strident/bruit, percussif, pur/clair, cuivré/métallique, râpeux/graineux, sonnant/déclin long, pétillant/éclatant, aérien/respirant, résonant/vif, creux, boisé, muet/voilé, soutenu/même, ouvert et concentré/compact. Dans une troisième étude, 243 participants ont évalué des sous-ensembles d'un groupe de 34 instruments d'orchestre à l'aide du modèle à 20 dimensions. Ces notes ont été utilisées pour générer des Profils de Caractères du timbre, qui servent de base à la méthode d'analyse d'orchestration, pour chacun de ces instruments. Un programme de calcul est en cours d'élaboration (prévu pour février-mars 2020) afin de générer un tracé d'orchestration sémantique à partir d'une pièce musicale. L'analyse fournira des informations sur la façon dont les dimensions sémantiques du timbre évoluent tout au long d'une œuvre, en utilisant d'abord un modèle qui combine les Profils de Caractères du Timbre en fonction de l'orchestration et utilise des modificateurs d'intensité basés sur des indications dynamiques. En plus des intrigues d'orchestration sémantique, je vise à traduire les données musicales en une analyse visuelle animée en temps réel qui peut être jouée avec la pièce pour illustrer les changements dynamiques du timbre résultant de l'orchestration.
BIOGRAPHY
Lindsey is completing her final semester in the doctoral program in music theory at Ohio State University. Her research focuses on timbre semantics and multimodal language; other recent projects deal with multimodal emotional associations in music and dance, instrument-specific absolute pitch, and 17th century harmony. In 2018, Lindsey received the Early Researcher Award from the European Society for the Cognitive Sciences of Music (ESCOM) during the International Conference on Music Perception and Cognition and is co-chair of the upcoming conference to be held in Ohio, May 11-15: "Future Directions of Music Cognition."
Lindsey termine son dernier semestre au sein du doctorat en théorie musicale à l'Université Ohio State. Sa recherche se concentre sur la sémantique du timbre et le langage multimodal; D'autres projets récents traitent des associations d'émotions multimodales dans la musique et la danse, de la hauteur absolue spécifique à un instrument et de l'harmonie du XVIIe siècle. En 2018, Lindsey a reçu le Prix du Chercheur en début de carrière de la part de la European Society for the Cognitive Sciences of Music (ESCOM) pendant la International Conference on Music Perception and Cognition et est co-présidente de la prochaine conférence qui se tiendra dans l'état de l'Ohio du 11 au 15 mai, "Future Directions of Music Cognition".