Powered by OpenAIRE graph
Found an issue? Give us feedback
addClaim

This Research product is the result of merged Research products in OpenAIRE.

You have already added 0 works in your ORCID record related to the merged Research product.
addClaim

This Research product is the result of merged Research products in OpenAIRE.

You have already added 0 works in your ORCID record related to the merged Research product.

Les instruments chanteurs

Authors: Christophe d'Alessandro; Samuel Delalez; Boris Doval; Lionel Feugère; Olivier Perrotin;
Abstract

National audience; Les instruments chanteurs a synthèse ou l'analyse-synthèse de la voix chantée est un sujet de recherche déjà ancien. La voix chan-tée a été synthétisée dès les premières tentatives de synthèse numérique de la parole dans les années 1960. Le propos de cet article est de présenter le principe de fonctionnement des instruments chanteurs que nous avons développés au cours des dernières années, et de discuter des applications et de l'ave-nir de cette approche. Comme la place manque pour détailler tous ces travaux, une liste de publications en fin d'article permettra au lecteur curieux d'appro-fondir le sujet. Les instruments ont été utilisés dans divers concerts et des exemples sonores se trouvent facilement sur la toile. Résumé Les instruments chanteurs sont nés de la rencontre entre synthèse vocale et nouvelles interfaces pour l'interaction humain-machine. La voix n'est pas un instrument de musique, car il n'y a pas d'objet externe mis en jeu par les membres ou par le souffle. La synthèse numérique permet pour la première fois une coupure entre le sujet et sa voix, en construisant des instruments chanteurs manipulés par les mains, les pieds, ou par toutes sortes d'interfaces humain-machine. Cependant, les possibilités de contrôle des instruments chanteurs sont encore limitées à certains aspects, car une transposition des gestes internes du chant effectués par l'appareil vocal en gestes externes des membres ne va pas de soi. Certains gestes sont analogues, d'autres sont médiatisés par un espace perceptif. Les travaux menés sur trois instruments chanteurs sont présentés : le contrôle de l'intonation par un stylet sur une tablette graphique et des gestes d'écriture ; le contrôle des voyelles et de la qualité vocale sur une surface ; le contrôle bimanuel de l'articulation consonantique ; le contrôle syllabique du rythme. Les modèles de synthèse sous-jacents utilisent soit la simulation du modèle source-filtre, soit la modification d'échantillons préenregistrés et étiquetés. Le contrôle des instruments chanteurs est multimodal, impliquant l'ouïe ainsi que la vue, le toucher, et la kinesthésie. Cette combinaison sensorielle et motrice permet dans certains cas de rendre les instruments chanteurs plus justes et précis que la voix, la vue privilégiant les aspects mélodiques et l'audition les aspects rythmiques. Miroir de la voix, l'instrument chanteur autorise toutes sortes de spéculations : musicales bien sûr, avec le Chorus Digitalis, choeur de voix de synthèse, mais aussi pour l'analyse des pratiques vocales, pour l'éducation ou la rééducation, en renforçant l'apprentissage de gestes vocaux par des traces visuelles, des gestes manuels ou corporels. Le statut symbolique de la voix est également affecté par la possibilité de contrôler et de produire le son vocal en dehors du corps : corps augmenté, mise en scène de l'expression vocale, double de la voix, jeu de la voix d'un ou d'une autre. Abstract Singing instruments are the result of the encounter between voice synthesis and new interfaces for human-computer interaction. Voice is not a musical instrument, since it does not involve an external object stimulated by limbs or breathe. In contrast, digital synthesis allows for the first time to separate the subject from its voice, by building singing instruments manipulated by hands, feet, or any human-computer interface. However, possibilities for singing instruments control are still limited to some aspects, as the transposition from internal singing gestures realised by the vocal apparatus to external gestures is not trivial. Some gestures are analogous, while others are transposed in perceptive spaces. Related work realised on three singing instruments is introduced: the intonation control by a stylus on a graphic tablet and writing gestures; the vocalic and voice quality controls on a surface; the bi-manual control of consonantal articulation; the rhythmic control of syllables. The underlying voice production models use either the simulation of a source-filter model, or the modification of pre-recorded and labelled samples. The control of singing instruments is multi-modal, involving hearing, sight, touch, and kinaesthesia. In some extent, this sensorimotor combination allows the singing instrument to be more accurate and precise than natural voice: the sight favouring melodic aspects while hearing being more related to rhythmic aspects. Mirror of voice, the singing instrument allows any kind of speculation: indubitably musical with Chorus Digitalis, a choir of synthesised voices, but also for the analysis of vocal practices, for education or re-education by strengthening the learning of vocal gestures through uses of visual traces, and manual and corporal gestures. Finally, the symbolic status of voice is also affected by the possibility to produce a vocal sound from outside the body: augmented body, staging of vocal expression, voice double, play of someone else's voice.

Country
France
Keywords

[SHS.MUSIQ]Humanities and Social Sciences/Musicology and performing arts, [INFO.INFO-TS]Computer Science [cs]/Signal and Image Processing, MT, [INFO.INFO-SD]Computer Science [cs]/Sound [cs.SD], [INFO.INFO-HC]Computer Science [cs]/Human-Computer Interaction [cs.HC], [SHS.LANGUE]Humanities and Social Sciences/Linguistics

17 references, page 1 of 2

[1] D. Arfib, J. Couturier, L. Kessous et V. Verfaille, V. « Strategies of mapping between gesture data and synthesis model parameters using perceptual spaces » Organised Sound, 7(2), 127-144, 2002 [OpenAIRE]

[2] Augustin d'Hippone De Musica (Traité de la musique), Livre 1, Chap. III, ca 386-387

[3] P. Cook et C. Leider « SqueezeVox : A New Controller for Vocal Synthesis Models », Proc. ICMC 2000, Berlin, Allemagne, 2000

[4] L. Feugère, C. d'Alessandro, B. Doval et O. Perrotin, « Cantor Digitalis : Chironomic Parametric Synthesis of Singing », J. Audio Speech Music Proc. (2017) 2017: 2. https ://doi.org/10.1186/s13636-016-0098-5, 2017 [OpenAIRE]

[5] M. Wanderley, J.-P. Viollet, F. Isart et X. Rodet « On the choice of transducer technologies for specific musical functions ». Proc. ICMC 2000, Berlin, Allemagne, 2000 [OpenAIRE]

[6] N. D'Alessandro, C. d'Alessandro, S. Le Beux et B. Doval « Real-time CALM Synthesizer New Approaches in Hands-Controlled Voice Synthesis », Proc. NIME06, Paris, France, pp. 266-271, 2006

[7] G. Bevin (2018), « MIDI specifications for Multidimensional Polyphonic Expression (MPE) », http://expressiveness.org/, consulté le 21 mars 2018

[8] C. d'Alessandro, N. D'Alessandro, S. Le Beux, J. Simko, F. Çetin et Hannes Pirker, « The Speech Conductor : Gestural Control of Speech Synthesis » proc. eNTERFACE 2005, Mons, Belgium, pp. 52-61, 2005

[9] C. d'Alessandro, L. Feugère, S. Le Beux, O. Perrotin et A. Rilliard « Drawing melodies : evaluation of chironomic singing synthesis », J. Acoust. Soc. Am. 135 (6), 3601-3612, 2014 [OpenAIRE]

[10] O. Perrotin et C. d'Alessandro « Seeing, listening, drawing : interferences between sensorimotor modalities in the use of a tablet musical interface », ACM Trans. on Applied Perception, 14(2), 2016

  • BIP!
    Impact byBIP!
    citations
    This is an alternative to the "Influence" indicator, which also reflects the overall/total impact of an article in the research community at large, based on the underlying citation network (diachronically).
    0
    popularity
    This indicator reflects the "current" impact/attention (the "hype") of an article in the research community at large, based on the underlying citation network.
    Average
    influence
    This indicator reflects the overall/total impact of an article in the research community at large, based on the underlying citation network (diachronically).
    Average
    impulse
    This indicator reflects the initial momentum of an article directly after its publication, based on the underlying citation network.
    Average
    OpenAIRE UsageCounts
    Usage byUsageCounts
    visibility views 8
    download downloads 55
  • citations
    This is an alternative to the "Influence" indicator, which also reflects the overall/total impact of an article in the research community at large, based on the underlying citation network (diachronically).
    0
    popularity
    This indicator reflects the "current" impact/attention (the "hype") of an article in the research community at large, based on the underlying citation network.
    Average
    influence
    This indicator reflects the overall/total impact of an article in the research community at large, based on the underlying citation network (diachronically).
    Average
    impulse
    This indicator reflects the initial momentum of an article directly after its publication, based on the underlying citation network.
    Average
    Powered byBIP!BIP!
  • 8
    views
    55
    downloads
    Powered byOpenAIRE UsageCounts
Powered by OpenAIRE graph
Found an issue? Give us feedback
visibility
download
popularity
This indicator reflects the "current" impact/attention (the "hype") of an article in the research community at large, based on the underlying citation network.
BIP!Popularity provided by BIP!
influence
This indicator reflects the overall/total impact of an article in the research community at large, based on the underlying citation network (diachronically).
BIP!Influence provided by BIP!
impulse
This indicator reflects the initial momentum of an article directly after its publication, based on the underlying citation network.
BIP!Impulse provided by BIP!
views
OpenAIRE UsageCountsViews provided by UsageCounts
downloads
OpenAIRE UsageCountsDownloads provided by UsageCounts
Average
Average
Average
8
55
moresidebar

Do the share buttons not appear? Please make sure, any blocking addon is disabled, and then reload the page.