Papers
Topics
Authors
Recent
Gemini 2.5 Flash
Gemini 2.5 Flash
88 tokens/sec
Gemini 2.5 Pro Premium
39 tokens/sec
GPT-5 Medium
27 tokens/sec
GPT-5 High Premium
22 tokens/sec
GPT-4o
88 tokens/sec
DeepSeek R1 via Azure Premium
95 tokens/sec
GPT OSS 120B via Groq Premium
465 tokens/sec
Kimi K2 via Groq Premium
226 tokens/sec
2000 character limit reached

Vivo : une approche multimodale de la synthese concatenative par corpus dans le cadre d'une oeuvre audiovisuelle immersive (2404.10578v1)

Published 16 Apr 2024 in cs.SD and eess.AS

Abstract: Which visual descriptors are suitable for multi-modal interaction and how to integrate them via real-time video data analysis into a corpus-based concatenative synthesis sound system.

Definition Search Book Streamline Icon: https://streamlinehq.com
References (55)
  1. Charles Bascou et Laurent Pottier : Gmu, a flexible granular synthesis environment in max/msp. In Proceedings of the Sound and Music Computing Conference (SMC’05), Salerno, Italy, 2005.
  2. Marc Battier : De la phonographie à la lutherie numérique. l’épiphanie du son artificiel. In Journées d’Informatique Musicale, Marseille, France, 2002.
  3. Walter Benjamin : L’oeuvre d’art à l’époque de sa reproductibilité technique. Allia, 2017 (publiée de façon posthume en 1955).
  4. Gilberto Bernardes, Carlos Guedes et Bruce Pennycook : Eargram: an application for interactive exploration of large databases of audio snippets for creative purposes. In Proceedings of the 9th International Symposium on Computer Music Modelling and Retrieval (CMMR), pages 265–277, 2012.
  5. Marc Billon et Anne Sèdes : Musiques visuelles, composition (musicale) audiovisuelle. In Journées d’Informatique Musicale, Paris, France, 2013.
  6. William Brent : A timbre analysis and classification toolkit for pure data. In ICMC, volume 2010, pages 224–229, 2010.
  7. Romain Bricout : Les enjeux de la lutherie électronique: de l’influence des outils musicaux sur la création et la réception des musiques électroacoustiques. Thèse de doctorat, Lille 3, 2009.
  8. Claude Cadoz : Geste-modèle physique-composition musicale. In Journées d’informatique musicale, Bourges, France, pages 1–13, 2001.
  9. Michel Chion, Claudia Gorbman et Walter Murch : L’audio-vision, son et image au cinéma. 3e édition, Armand Colin, Paris, 1993.
  10. Nick Collins : Audiovisual concatenative synthesis. In ICMC, 2007.
  11. Michail Dimopoulos et Thomas Winkler : Image warmness : a new perceptual feature for images and videos. In 2014 22nd European Signal Processing Conference (EUSIPCO), pages 1662–1666. IEEE, 2014.
  12. Alastair C Disley et David M Howard : Spectral correlates of timbral semantics relating to the pipe organ. Speech, Music and Hearing, 46:25–39, 2004.
  13. Brian Evans : Foundations of a visual music. Computer Music Journal, 29(4):11–24, 2005.
  14. D. GABOR : Acoustical quanta and the theory of hearing. Nature, 159(4044):591–594, mai 1947.
  15. An improved sobel edge detection. In 2010 3rd International Conference on Computer Science and Information Technology. IEEE, juillet 2010.
  16. William W Gaver : What in the world do we hear?: An ecological approach to auditory event perception. Ecological psychology, 5(1):1–29, 1993.
  17. James J Gibson : On the analysis of change in the optic array. Scandinavian Journal of Psychology, 1977.
  18. James Jerome Gibson : The senses considered as perceptual systems. Houghton Mifflin, 1966.
  19. James Jerome Gibson : The ecological approach to visual perception. Psychology Press, 1979.
  20. Benjamin Hackbarth, Norbert Schnell et Diemo Schwarz : Audioguide: a framework for creative exploration of concatenative sound synthesis. IRCAM Research Report, 2010.
  21. Berthold KP Horn et Brian G Schunck : Determining optical flow. Artificial intelligence, 17(1-3):185–203, 1981.
  22. IRCAM : Brahms : Sud, jean-claude risset, https://brahms.ircam.fr/fr/works/work/11506/.
  23. Randy Jones et Ben Nevile : Creating visual music in jitter: Approaches and techniques. Computer Music Journal, 29(4):55–70, 2005.
  24. Norman McLaren : Synchromy, 1971. Canada, Québec.
  25. Norman McLaren et Lambart Evelyn : Lines - Vertical, 1960. Canada, Québec.
  26. Norman McLaren et Lambart Evelyn : Lines - Horizontal, 1962. Canada, Québec.
  27. Renaud Meric : Concret PH, un espace mouvant. In Journées d’Informatique Musicale, Saint-Denis, France, juin 2005.
  28. Leonard B Meyer : Music, the Arts and Ideas. Chicago : University of Chicago Press, 1967.
  29. Jean-Pierre Moreau : De la perception à la représentation: vers une épistémologie de l’œuvre interdiscursive Pour une analyse de l’œuvre vidéomusicale. Thèse de doctorat, Langues, Lettres et Arts (ED 354), 2018.
  30. Laurence Nigay et Joëlle Coutaz : Espaces conceptuels pour l’interaction multimédia et multimodale. Technique et science informatiques, 15(9):1195–1225, 1996.
  31. Cecilia Pasquini, Fernando Pérez-González et Giulia Boato : A benford-fourier jpeg compression detector. In 2014 IEEE International Conference on Image Processing (ICIP), pages 5322–5326. IEEE, 2014.
  32. Nathan Peiffer-Smadja et Laurent Cohen : The cerebral bases of the bouba-kiki effect. NeuroImage, 186:679–689, février 2019.
  33. Jean Piché : De la musique et des images. Circuit, 13(3):41–50, février 2010.
  34. Jean Piché : Sieves, 2004. Canada, Toronto, SoundPlay Festival.
  35. Vilayanur S Ramachandran et Edward M Hubbard : Synaesthesia–a window into perception, thought and language. Journal of consciousness studies, 8(12):3–34, 2001.
  36. Jean-Claude Risset : Sud, 1985. cd Ina/GRM C 1003.
  37. Curtis Roads : Introduction to granular synthesis. Computer Music Journal, 12(2):11, 1988.
  38. Uncovering the meaning of four semantic attributes of sound : Bright, rough, round and warm. 2020.
  39. Pierre Schaeffer : Etude aux objets, 1958. Belgique, Bruxelles, Exposition internationale.
  40. Pierre Schaeffer : Traité des objets musicaux: Essai interdiscipines. Éditions du Seuil, 1966.
  41. Diemo Schwarz : Concatenative sound synthesis: The early years. Journal of New Music Research, 35(1):3–22, mars 2006.
  42. Diemo Schwarz : Touch interaction for corpus-based audio–visual synthesis. In NIME, Mexico City, Mexique, 2023.
  43. Real-time corpus-based concatenative synthesis with catart. In 9th International Conference on Digital Audio Effects (DAFx), pages 279–282, 2006.
  44. Turning the tables: an interactive surface for vjing. In Proceedings of the SIGCHI Conference on Human Factors in Computing Systems, pages 1251–1254, 2009.
  45. Vincent Tiffon : Pour une médiologie musicale comme mode original de connaissance en musicologie. Revue Filigrane n, 1:115–139, 2011.
  46. Vincent Tiffon : Le public comme \guillemotleftmusiquant\guillemotright : exemple de l’installation immersive et interactive xy, Hermann, 2012.
  47. Caroline Traube : An interdisciplinary study of the timbre of the classical guitar. (2004).
  48. Pierre Alexandre Tremblay, Gerard Roma et Owen Green : Enabling programmatic data mining as musicking: The fluid corpus manipulation toolkit. Computer Music Journal, 45(2):9–23, 2021.
  49. Barry Truax : Real-time granular synthesis with a digital signal processor. Computer Music Journal, 12(2):14, 1988.
  50. Hugues Vinet : Les nouveaux musiquants, 2005.
  51. Matthew Wright : Open sound control: an enabling technology for musical networking. Organised Sound, 10(3):193–200, 2005.
  52. Iannis Xenakis : Concret PH, 1958. Belgique, Bruxelles, Exposition Universelle, diffusion dans l’espace du Pavillon.
  53. Iannis Xenakis : Polytopes, 1967-1985.
  54. Iannis Xenakis : Archaiotita kai sygchroni Mousiki (Antiquité et Musique contemporaine). 1976.
  55. Iannis Xenakis : Formalized music: thought and mathematics in composition (Musiques Formelles). Pendragon Press, 1992.
Citations (1)
List To Do Tasks Checklist Streamline Icon: https://streamlinehq.com

Collections

Sign up for free to add this paper to a collection.

Summary

We haven't generated a summary for this paper yet.

Dice Question Streamline Icon: https://streamlinehq.com

Follow-up Questions

We haven't generated follow-up questions for this paper yet.

Authors (1)