Dr. Michael Haverkamp / Köln                                                   Beschreibung: germ_flag     Beschreibung: cid:image001.jpg@01C7F96A.28198840     Beschreibung: RFlag.jpgBeschreibung: Beschreibung: RFlag.jpg

 

Synesthesia

 

Historical Impressions:

„Farbe-Ton-Forschungen I“, Anschütz                       „Komposition in Blau“, motion picture by Fischinger

                  landscape painted by  Rimington                                            László’s „Farblichtmusik“

                                                              musical painting by Klausz                       "Bellyache" by Gahlbeck

 

Synesthesia means the capability of the perceptual system to induce perception within one sensual modality by stimulation of a different sensual area. Similar phenomena are pronounced at relatively few individuals, but show a characteristic permanence. Often the phenomenon of visual perception caused by auditory stimulation is described (color(ed) hearing). Fixed coupling of different properties of one sensual area can also occur. A typical example is color perception induced by visual stimulation by an abstract, uncolored figure, like a character (coupling of shape and color).

 

The papers and examples collected on this page illuminate the phenomenon of synesthesia, but also consider the widespread capabilities of inter-modal coupling via analogies, concrete association, multi-sensual symbolism and conscious generation of rules (e.g. by means of “mathematic-physical coupling”). This enables development of numerous fields of application, like sound design and perception of soundscapes, multisensory design of products and interfaces, coupling of music and the fine arts, and many others.

 

______________________________________________________________________________

 

Some of my publications of applied research and science, for download:

(sorry - various publications have not yet been translated)

 

Can Synesthetic Perception help to define Attractive Product Design?          (1.1 MB)

 

Effects of Material Touch Sounds on Perceived Quality of Surfaces              (3.9 MB)

 

Visualizing Auditory Perception: Correlations, Concepts, Synesthesia          (260 kB)

 

Visual Aspects of Auditory Perception                                                        (2.14 MB)

 

Synesthetic Design and Sound Quality                                                       (145 kB)

 

Touchscape

 

Synesthetic Perception and Design      (German, short version, 174 kB)

 

Extended Version                                                    (German, 706 kB)

 

Coupling of auditory and visual Perception                 (German, 261 kB)

 

Visualisation of Synaesthetic Experience during the early 20th Century

presented in 2003 at the International Conference on Synaesthesia,

Medizinische Hochschule Hannover   (English, 639 kB)

 

Audio-visual Coupling and Perception of Sound-Scapes

(English, 249 kB)

 

Music and Motion - Alexander Truslit and the Research on Synesthesia

Excerpt of my audio-visual presentation made on the 2nd international

conference on synesthesia, Hanover Medical University, 1.-3.12.2006

(English, 1.4 MB)

 

Motion as Origin of Music - Alexander Truslits Studies on Music Perception

                                                                               (German, 244 kB)

 

Cross-sensory Interaction during Perception of a complex Environment

(Englisch, 553 kB)

 

______________________________________________________________________________

 

Book Publication:

 

 

Synesthetic Design. Handbook for a Multi-Sensory Approach.

Basel: Birkhäuser Verlag, 2012                                                Info

 

Synästhetisches Design - Kreative Produktentwicklung für alle Sinne.

München: Carl Hanser Verlag, 2009                                         Info

 

 

Beschreibung: Perlenfl Detail mod col DSCN6942 30

Tactile design of a beverage bottle

 

Contributions to Anthologies & Journals:

 

Synästhetische Wahrnehmung und Geräuschdesign.

In: Becker, Klaus (Hrsg.): Subjektive Fahreindrücke sichtbar machen II.

Renningen-Malmsheim: expert-Verlag, 2001

 

Synästhetische Wahrnehmung und Design. Grundlagen: Verknüpfung

auditiver und visueller Attribute. Annual conference of "Gesellschaft für

Musik-forschung", Robert Schumann Hochschule Düsseldorf, 25.-28.9.2002.

Published in: Kalisch, Volker (Hrsg.): Synästhesie in der Musik

– Musik in der Synästhesie. Essen: Verlag Die Blaue Eule, 2004

 

Audio-visuelle Verknüpfungen im Wahrnehmungssystem und

die Eingrenzung synästhetischer Phänomene. In: Sidler, Natalia

& Jewanski, Jörg (Hrsg.): Farbe-Licht-Musik. Synästhesie und

Farblichtmusik. Züricher Musikstudien Vol. 5. Bern: Peter Lang

Verlag, 2006

 

Analytische und komplexe Synopsie. In: Sidler, Natalia & Jewanski,

Jörg (Hrsg.): Farbe-Licht-Musik. Synästhesie und Farblichtmusik.

 Züricher Musikstudien Vol. 5. Bern: Peter Lang Verlag, 2006

 

Beurteilung und Gestaltung von Geräuschen auf Basis inter-

modaler Analogien. In: Becker, Klaus (Hrsg.): Subjektive Fahreindrücke

sichtbar machen III. Renningen: expert-Verlag, 2006

 

Synästhetische Aspekte der Geräuschgestaltung im Automobilbau.

In: Kai Bronner, Rainer Hirt (Hg.): Audio Branding. Entwicklung, Anwendung,

Wirkung akustischer Identitäten in Werbung, Medien und Gesellschaft.

München: Reinhard Fischer Verlag, 2007

 

Percezione sinestesica e design del rumore. Progetto Grafico, Periodico

dell’Aiap (Associazione italiana progettazione per la comunicazione visiva).

Anno 5, Numero 10. Roma: 2007, 162-169

 

Synesthetic Design – building multi-sensory Arrangements.

In: Kai Bronner & Rainer Hirt (eds.): Audio Branding - Brands, Sounds

and Communication. Berlin: Nomos, 2009

 

Music and Motion – Alexander Truslit and the research on Synesthesia.

&

Bewegung als Ursprung der Musik - Alexander Truslits frühe Studien

zur Musikwahrnehmung.

In: Jasmin Sinha (Hg.): Synästhesie der Gefühle. Luxemburg: Synaisthesis

Verlag, 2009

 

Synästhetisches Design - Multisensuelle Gestaltung in der

angewandten Kunst. In: Andrea Gottdang, Regina Wohlfarth (eds.):

Mit allen Sinnen - Sehen, Hören, Schmecken, Riechen und Fühlen in

der Kunst. Leipzig: Seemann Henschel Verlag, 2010

 

Advanced description of noise perception by analysis of cross-sensory

interactions within soundscapes. Noise Control Eng. J. 58 (5), Sept-Oct 2010

 

Bewertung von Fahrzeuggeräuschen: Verbindungen zwischen auditiven und

visuellen Merkmalen beim Automobil. In: Klaus Genuit (ed.): Sound-Engineering

im Automobilbereich. Berlin: Springer, 2010, 158–182

 

Multisensuelle Referenzen bei der Wahrnehmung von Geräuschen.

Lärmbekämpfung 3/2011, 115-117

 

Entwicklung von Konzepten für die Gestaltung innovativer Geräusche auf

Grundlage multisensueller Aspekte der Wahrnehmung.

Lärmbekämpfung 2/2012, 73-76

 

Gestaltete Wahrnehmung – intermodale Qualitäten und Design.

In: Kluck, Steffen / Volke, Stefan (eds.): Näher dran? Zur Phänomenologie des

Wahrnehmens. Freiburg: Verlag Karl Alber, 2012, 135-164

 

Book Review: Hans Brandner: Bewegungslinien der Musik: Alexander Truslit und

seine Lehre der Körpermusikalität, der Kinästhesie der Musik (Motion lines in music:

Alexander Truslit and his teaching of body musicality, the kinesthesia of music -

Wißner, Augsburg 2012).

Psychomusicology: Music, Mind, and Brain, 2013 Volume 23, Issue 1 (Mar), 54-58

 

Beschreibung: Salzburg 44_DT09_12

Design-Conference-09 of Netzwerk Design & Medien, Fachhochschule Salzburg,

Campus Kuchl (Austria), 12.11.2009

 

 

Contributions to Conference Proceedings:

 

Synästhetische Wahrnehmung und Geräuschdesign. Proceedings:

Annual conference DAGA 2002, Deutsche Gesellschaft für Akustik, Bochum,

2002

 

Visualisierung auditiver Wahrnehmung. Historische und neue

Konzepte - Ein phänomenologischer Überblick. Proceedings:

Annual conference DAGA 2003, Deutsche Gesellschaft für Akustik,

Aachen, 2003

 

Audio-Visual Coupling and Perception of Sound-Scapes.

Proceedings: joint congress CFA/DAGA 2004, Deutsche Gesellschaft für

Akustik & Congrès Francais d'Acoustique. Strasbourg/France, 2004

 

Music and Motion - Alexander Truslit and the Research on Synesthesia.

2nd international conference on synesthesia – 1.-3.12.2006. Hanover

Medical University, Library Building    Publ.: Synaisthesis Verlag, 2009

 

Bewegung als Ursprung der Musik - Alexander Truslits frühe Studien

zur Musikwahrnehmung. Proceedings: Annual conference DAGA 2007.

Berlin: Deutsche Gesellschaft für Akustik, 2007

 

Essentials for description of cross-sensory interaction during

perception of a complex environment. Proceedings of Inter-Noise 2007.

Istanbul: Turkish Acoustical Society, 2007

 

Die Bedeutung der Laut- und Klangmalerei für die Generierung

inter-modaler Bezüge. Proceedings: Annual conference DAGA 2008.

Berlin: Deutsche Gesellschaft für Akustik, 2008

 

Application of Synesthetic Design as multi-sensory Approach on

Sound Quality. Proceedings: Annual conference NAG/DAGA 2009,

Rotterdam/NL. Berlin: Deutsche Gesellschaft für Akustik, 2009

 

Look at that sound! – Visual aspects of auditory perception.

Proceedings of the 3rd International Congress on Synaesthesia,

Science and Art (26.-29.4.2009), Granada/Spain: 2009

 

Presenters of the 3rd international Congress of Synaesthesia, Science and Art, Granada/Spain,

26.-29.4.2009

 

Synesthetic approach for evaluation of the cross-sensory quality

of multi-media applications. Second international workshop on quality

of multimedia experience QoMEX (21-23.6.2010),

Trondheim/Norway: 2010

 

Visualizing auditory perception: Correlations, Concepts, Synesthesia.

Galeyev Readings (2.-6.10.2010), Prometheus-Institute at the Technical

University Kazan/Russia: 2010

 

Die “Farbe-Ton-Forschung” in Hamburg 1925-1936. Annual conference

DAGA 2011, Düsseldorf. Berlin: DEGA, 2011

 

Visual representations of sound and emotion.  

Proceedings of the 4th International Congress on Synesthesia:

Science and Art (16.-19.2.2012), Almeria/Spain: 2012

 

Repräsentation von Bewegungsvorgängen in Geräuschen.

Annual conference DAGA 2012, Darmstadt. Berlin: DEGA, 2012

 

Multisensory Perception and Product Design.

Plastics in Automotive Engineering. Düsseldorf: VDI Verlag, 2013, 1-12

 

Ein Beurteilungsverfahren für den Einfluss von Berührungsgeräuschen

auf die Wahrnehmung der Materialqualität (with Stefan Erdmann).

Annual Conference DAGA 2014, Oldenburg. Berlin: DEGA, 2014,

519-20

 

Cross-Sensory Interaction in the Perception of Materials for the Vehicle

Interior. Proceedings of FISITA 2014 World Automotive Congress,

Maastricht, The Netherlands. London: FISITA, 2014

 

Repräsentation von Bewegungsvorgängen in Geräuschen.

8. Magdeburger Symposium Motor- und Aggregate-Akustik. Magdeburg:

Otto-von-Guericke-Universität, 2014, 73-85

 

Effects of Material Touch Sounds on Perceived Quality of Surfaces.

Forum Acusticum. Krakow, Poland, 2014

 

Frühe Ansätze zur Beschreibung auditiv angeregter Bewegungs-

vorstellung bei Alexander Truslit.

41. Jahrestagung für Akustik DAGA 2015, Nürnberg. Berlin: DEGA, 2015,

1192-95

 

Can Synesthetic Perception Help to Define Attractive Product Design?  

Proceedings of the 5th International Congress of Synaesthesia,

Science and Arts (15.-19.5.2015), Alcalá la Real/Spain: 2015, 297-305

 

Sinestesia 2015 Gruppenfoto cut 80

Presenters and participants at the 5th International Congress of Synaesthesia, Science and Arts,

Alcalá la Real/Spanien, 15.-19.5.2015

 

 

Seminars:

 

Synästhetisches Design - Grundlagen, Konzepte und

Anwendungen. Haus der Technik / Essen 2006 - 07

 

Synesthetic Design – multi-sensory Figuration of Interfaces.

Köln International School of Design KISD, 2009 - 11

 

Beschreibung: singing rainbow pic opt 100

Announcement of Galeyev Readings Conference, Festival and Exhibition,

Prometheus-Institute at the Technical University Kazan/Russia: 2010

 

 

Presentations without Publication:

 

Visualisation of synaesthetic experience during the early 20th

century – an analytic approach. International Conference on Syn-

aesthesia, Medizinische Hochschule Hannover, 22./23.3.2003

 

Audio-visuelle Koppelungen im Wahrnehmungssystem: Grundlagen

und Anwendungen. Presentation: Technical University München,

Institut für Mensch-Maschine-Kommunikation, Forschungsgruppe

„Hörobjekte“, 26.6.2003

 

Etude du couplage sensoriel visuel & sonore

Veille "Human Engineering", Eurosyn, Paris, 25.11.2004

 

Auditiv-visuelle Koppelungen im Wahrnehmungssystem

- Synästhesie. Eidgenössische Technische Hochschule Zürich,

Institut für Signal- und Informationsverarbeitung, Akustisches Kolloquium,

8.12.2004

 

Eye and Ear – Relationship between Music and the Visual Arts

- Alte Feuerwache Köln, 19.11.2005

- Kunst- und Kulturinitiative EngelsArt  / Engelskirchen, 19. 2. 2006

 

Grundlagen der Visualisierung von Geräuschen und Musik

HEAD acoustics NVH User Group Meeting  /  Kerpen, 2.11.2006

 

Synästhetische Aspekte der Geräuschgestaltung im Automobilbau

Im Rahmen des Seminars: sound engineering  /  Darmstadt, 21.11.2006

 

Bewegung als Ursprung der Musik

- Alexander Truslits frühe Studien zur Musikwahrnehmung

Jahrestagung der Gesellschaft für Musikforschung 2007,
Musikwissenschaftliches Institut der Universität zu Köln, 27.
9. 2007

 

Why do we essentially need a synesthetic approach on

sound design? Verband Deutscher Tonmeister:

2nd international VDT symposium : sounddesign.

Forum am Schlosspark / Ludwigsburg, 1. 11. 2007

 

Synästhetisches Design – multi-sensuelle Gestaltung in der

angewandten Kunst. Ringvorlesung „Sehen mit allen Sinnen. Hören,

Schmecken, Riechen und Fühlen in der Kunst". Ludwig-Maximilians-

Universität München, 10. 7. 2008

 

Geräuschbilder gestalten: Verbindungen zwischen

auditiven und visuellen Merkmalen.

- Conference: Fahrzeuggeräusche (vehicle noise). Haus der Technik,

  Essen, 25.11.2008

- Lecture during the workshop sound sense of Kunsthochschule für

  Medien (Academie of Media Arts) KHM, Köln, 6. 6. 2009

 

Synesthetic design for systematic figuration of intuitive product

features. Köln International School of Design KISD, 30. 6. 2009

 

Synästhetisches Design - Kreative Produktentwicklung für alle Sinne.

Netzwerk Design & Medien, Design-Tagung-09 „Gutes Design ist mehr als

eine schöne Form!“ Fachhochschule Salzburg, Campus Kuchl, 12. 11. 2009

 

Sound-Color-Space – Synesthetic Design. Audio-Branding Conference.

Hamburg, 5. 11. 2010

 

Multisensuelle Referenzen bei der Wahrnehmung von Geräuschen.

Multisensory Perception. Workshop of DEGA.

Bergische Universität Wuppertal, 5. 2. 2011

 

Entwicklung von Konzepten für die Gestaltung innovativer Geräusche

auf Grundlage multisensueller Aspekte der Wahrnehmung. DEGA-

Symposium E-Mobilität & Akustik. Hochschule für Technik Stuttgart,

21.10.2011

 

Hören, sehen, fühlen, steuern – Multisensuelles Feedback gestalten

multisense® Forum 2011, München

 

Representation of Movement by Means of Synesthetic Sound Design.

International Conference: Noise Optimization EV/HEV. Frankfurt,

25.-27.9.2013

 

Optimisation of Surface Perception - Synesthetic Design

Automotive Surfaces Conference. Berlin, 26.-27.11.2013

 

Psychoacoustic Effects of Material Touch Sounds on Perception

of Interior Surfaces. Automotive Acoustics & Vibration. Nantwich/UK,

22.-23.9.2015

 

Multisensory Design and Synaesthesia – Current and Future

Approaches. Synaesthesia and Cross-modal Perception. Institute of

Neuroscience, Trinity College Dublin, Ireland, 21.-23.4.2016

 

Impact of Synesthesia and Cross-Sensory Interactions on

Multisensory Design of Brands and Products. 7th CACHT Sensory

Branding Forum, held at 17th International Multisensory Research Forum

IMRF 2016, Suzhou, China, 15.-18.6.2016

 

Alexander Truslit: Abbildung und Vermittlung musikalischer

Bewegungsphänomene. (mit Hans Brandner). XVIth International

Conference of the GfM (Gesellschaft für Musikforschung).

Johannes Gutenberg-Universität Mainz, Poster, 14.-17.9.2016

 

Can Synesthetic Perception Help to Define Attractive Product Design? 

1st Synesthesia Art Exhibition and Forum in China: Cross Regional Synesthesia

Survey (Beijing, Xu Zhou, Hang Zhou, Guang Zhou - Joint program between

Chinese Synaesthesia Alliance and FIAC), Exhibition/Poster, 2016

 

Surface Perceived Quality and Material Identification.

Automotive Surfaces Conference 2016. Munich, 29.-30.12.2016

 

 

Beschreibung: Gruppenbild 2 ausschnitt

International Conference on Synesthesia Research

Hannover, 22. / 23.03.2003     :     after-work-party

 

from left to right: Christine Söffing (Ulm)    Stephen P. Gorman (Washington DC)  

Jörg Jewanski (Münster)     Birgit Gaschler (Magdeburg)     Michael Haverkamp (Köln)   

Anina Rich (Melbourne)   Richard Cytowic (Washington DC)   Julian Asher (Cambridge)

 

Contact                                                   updated:  5. 12. 2016

 

MainPage