Dr. Michael Haverkamp /
Köln
Synesthesia
Historical Impressions:
„Farbe-Ton-Forschungen I“, Anschütz „Komposition in Blau“,
motion picture by Fischinger
landscape painted by
Rimington
László’s „Farblichtmusik“
musical painting by Klausz "Bellyache" by
Gahlbeck
Synesthesia means the capability
of the perceptual system to induce perception within one sensual modality by
stimulation of a different sensual area. Similar phenomena are pronounced at
relatively few individuals, but show a characteristic permanence. Often the
phenomenon of visual perception caused by auditory stimulation is described
(color(ed) hearing). Fixed coupling of different properties of one sensual area
can also occur. A typical example is color perception induced by visual
stimulation by an abstract, uncolored figure, like a character (coupling of shape and color).
The papers and examples collected on this page
illuminate the phenomenon of synesthesia, but also consider the widespread
capabilities of inter-modal coupling via analogies, concrete association,
multi-sensual symbolism and conscious generation of rules (e.g. by means of
“mathematic-physical coupling”). This enables development of numerous fields of
application, like sound design and perception of soundscapes, multisensory
design of products and interfaces, coupling of music and the fine arts, and
many others.
______________________________________________________________________________
Some of my scientific
publications on these topics, for download:
(sorry -
various publications have not yet been translated)
NEW:
Visualizing
auditory Perception: Correlations, Concepts, Synesthesia (260
kB)
Visual Aspects of
Auditory Perception (2,14 MB)
Synesthetic Design and
Sound Quality (145
kB)
Synesthetic Perception and Design (German, short version, 174 kB)
Extended Version
(German, 706 kB)
Coupling of auditory and visual Perception (German, 261 kB)
Visualisation of Synaesthetic Experience during
the early 20th Century
presented in 2003 at the International Conference on
Synaesthesia,
Medizinische Hochschule Hannover (English, 639
kB)
Audio-visual Coupling and Perception of Sound-Scapes
(English,
249 kB)
Music and Motion - Alexander Truslit and the Research on
Synesthesia
Excerpt of my audio-visual presentation made on the
2nd international
conference on synesthesia,
(English,
1.4 MB)
Motion as Origin of Music - Alexander Truslits Studies on
Music Perception
(German, 244 kB)
Cross-sensory Interaction during Perception of a complex
Environment
(Englisch,
553 kB)
______________________________________________________________________________
Examples: visual Sensations caused by
auditory Stimuli
J. S. Bach: Brandenburg Concertos
Sound
of a Tibetian sound shell
______________________________________________________________________________
The list of literature shows books and papers
regarding all aspects of synesthesia and cross-modal coupling. Scientific works
from medicine, psychology, musicology and study of literature are includes as
well as approaches from fine arts and design. Additionally, peripheral topics
like music and motion, literary
"Schallanalyse" and entoptic phenomena are included. Emphasis
is placed on the extensive approaches issued before 1940, indicating a first
period of prosperity of research on synesthesia. Acceptance for the list does not imply any
assessment of the content, but indicates principle relevance for synesthesia research.
All publications have been proven – most of them are available in my library.
Most important books published before 1940
Synesthesia and Music
/ essential Opera
______________________________________________________________________________
Book Publication:
Synästhetisches
Design - Kreative Produktentwicklung für alle Sinne.
München: Carl Hanser Verlag, 2009 Info E
Tactile design of a beverage bottle
Contributions to Anthologies &
Journals:
Synästhetische
Wahrnehmung und Geräuschdesign.
In: Becker, Klaus (Hrsg.): Subjektive
Fahreindrücke sichtbar machen II.
Renningen-Malmsheim: expert-Verlag, 2001
Synästhetische Wahrnehmung und Design. Grundlagen: Verknüpfung
auditiver und visueller Attribute.
Annual conference of "Gesellschaft für
Musik-forschung", Robert
Schumann Hochschule Düsseldorf, 25.-28.9.2002.
Published in: Kalisch, Volker
(Hrsg.): Synästhesie in der Musik
– Musik in der Synästhesie. Essen: Verlag Die Blaue Eule, 2004
Audio-visuelle Verknüpfungen im
Wahrnehmungssystem und
die Eingrenzung
synästhetischer Phänomene. In: Sidler, Natalia
& Jewanski, Jörg (Hrsg.): Farbe-Licht-Musik. Synästhesie
und
Farblichtmusik. Züricher Musikstudien
Vol. 5. Bern: Peter Lang
Verlag, 2006
Analytische und komplexe Synopsie. In: Sidler, Natalia & Jewanski,
Jörg (Hrsg.): Farbe-Licht-Musik. Synästhesie und Farblichtmusik.
Züricher Musikstudien Vol. 5. Bern: Peter Lang
Verlag, 2006
Beurteilung
und Gestaltung von Geräuschen auf Basis inter-
modaler
Analogien.
In: Becker, Klaus (Hrsg.): Subjektive Fahreindrücke
sichtbar machen III. Renningen:
expert-Verlag, 2006
Synästhetische Aspekte der Geräuschgestaltung im
Automobilbau.
In: Kai Bronner,
Rainer Hirt (Hg.):
Audio
Branding. Entwicklung, Anwendung,
Wirkung
akustischer Identitäten in Werbung, Medien und Gesellschaft.
München: Reinhard Fischer Verlag, 2007
Percezione sinestesica e design del rumore. Progetto Grafico, Periodico
dell’Aiap (Associazione
italiana progettazione per la comunicazione visiva).
Anno 5, Numero 10. Roma: 2007, 162-169
Synesthetic Design – building
multi-sensory Arrangements.
In: Kai
Bronner & Rainer Hirt (eds.): Audio Branding - Brands, Sounds
and Communication.
Music and Motion – Alexander Truslit and the research
on Synesthesia.
&
Bewegung als Ursprung der Musik - Alexander Truslits frühe Studien
zur
Musikwahrnehmung.
In: Jasmin Sinha
(Hg.): Synästhesie der Gefühle. Luxemburg: Synaisthesis
Verlag, 2009
Synästhetisches Design - Multisensuelle Gestaltung in der
angewandten
Kunst. In:
Andrea Gottdang,
Mit allen Sinnen - Sehen, Hören, Schmecken,
Riechen und Fühlen in
der Kunst. Leipzig: Seemann Henschel Verlag,
2010
Advanced description of noise perception by analysis of cross-sensory
interactions within soundscapes. Noise Control
Bewertung
von Fahrzeuggeräuschen: Verbindungen
zwischen auditiven und
visuellen Merkmalen
beim Automobil.
In: Klaus Genuit (ed.): Sound-Engineering
im
Automobilbereich. Berlin: Springer, 2010, 158–182
Multisensuelle
Referenzen bei der Wahrnehmung von Geräuschen.
Lärmbekämpfung 3/2011, 115-117
Design-Conference-09 of Netzwerk Design & Medien, Fachhochschule Salzburg,
Campus Kuchl (Austria), 12.11.2009
Contributions to Conference Proceedings:
Synästhetische Wahrnehmung und Geräuschdesign. Proceedings:
Annual conference DAGA 2002,
Deutsche Gesellschaft für Akustik, Bochum,
2002
Visualisierung
auditiver Wahrnehmung.
Historische und neue
Konzepte - Ein
phänomenologischer Überblick. Proceedings:
Annual conference DAGA
2003, Deutsche Gesellschaft für Akustik,
Aachen, 2003
Audio-Visual
Coupling and Perception of Sound-Scapes.
Proceedings: joint
congress CFA/DAGA 2004, Deutsche
Gesellschaft für
Akustik & Congrès Francais d'Acoustique. Strasbourg/France, 2004
Music and Motion - Alexander Truslit and the Research
on Synesthesia.
2nd international conference on synesthesia – 1.-3.12.2006.
Bewegung
als Ursprung der Musik - Alexander Truslits frühe Studien
zur Musikwahrnehmung. Proceedings: Annual conference DAGA 2007.
Berlin: Deutsche
Gesellschaft für Akustik, 2007
Essentials for description of
cross-sensory interaction during
perception of a complex environment. Proceedings of Inter-Noise 2007.
Istanbul: Turkish Acoustical Society, 2007
Die Bedeutung der
Laut- und Klangmalerei für die Generierung
inter-modaler Bezüge. Proceedings: Annual conference DAGA 2008.
Berlin: Deutsche
Gesellschaft für Akustik, 2008
Application of Synesthetic Design as multi-sensory
Approach on
Sound Quality. Proceedings: Annual conference NAG/DAGA 2009,
Rotterdam/NL. Berlin: Deutsche Gesellschaft für Akustik, 2009
Look at that sound! – Visual aspects of
auditory perception.
Proceedings of the 3rd International Congress
on Synaesthesia,
Science and Art (26.-29.4.2009), Granada/Spain:
2009
Synesthetic approach for evaluation of the
cross-sensory quality
of multi-media applications. Second international workshop on quality
of multimedia experience QoMEX (21-23.6.2010),
Trondheim/Norway: 2010
Visualizing auditory perception:
Correlations, Concepts, Synesthesia.
Galeyev Readings (2.-6.10.2010), Prometheus-Institute
at the Technical
University Kazan/Russia: 2010
Die
“Farbe-Ton-Forschung” in Hamburg 1925-1936. Annual conference
DAGA 2011, Düsseldorf.
Lecturers
of the 3rd International Congress on
Synaesthesia, Science and Art,
Granada/Spain, 26.-29.4.2009
Seminars:
Synästhetisches
Design - Grundlagen, Konzepte und
Anwendungen.
Haus
der Technik / Essen 2006/07
Synesthetic Design – multi-sensory Figuration of Interfaces.
Köln International School of Design KISD,
since 2009
Announcement of Galeyev Readings Conference, Festival and Exhibition,
Prometheus-Institute at the Technical University Kazan/Russia: 2010
Presentations
without Publication:
Visualisation of synaesthetic experience during the early
20th
century – an analytic approach. International Conference on Syn-
aesthesia,
Medizinische Hochschule Hannover, 22./23.3.2003
Audio-visuelle
Koppelungen im Wahrnehmungssystem: Grundlagen
und Anwendungen. Presentation: Technical
University München,
Institut für Mensch-Maschine-Kommunikation,
Forschungsgruppe
„Hörobjekte“,
26.6.2003
Etude du couplage sensoriel
visuel & sonore
Veille "Human
Engineering", Eurosyn, Paris, 25.11.2004
Auditiv-visuelle Koppelungen im
Wahrnehmungssystem
- Synästhesie. Eidgenössische Technische
Hochschule Zürich,
Institut für Signal- und
Informationsverarbeitung, Akustisches Kolloquium,
8.12.2004
Eye and Ear – Relationship between Music and the Visual Arts
- Alte Feuerwache Köln,
19.11.2005
- Kunst- und Kulturinitiative EngelsArt / Engelskirchen, 19. 2. 2006
Grundlagen
der Visualisierung von Geräuschen und Musik
HEAD acoustics NVH User Group Meeting /
Kerpen, 2.11.2006
Synästhetische Aspekte der Geräuschgestaltung
im Automobilbau
Im Rahmen des
Seminars: sound engineering /
Darmstadt, 21.11.2006
Bewegung
als Ursprung der Musik
-
Alexander Truslits frühe Studien zur Musikwahrnehmung
Jahrestagung der Gesellschaft für Musikforschung
2007,
Musikwissenschaftliches Institut der Universität zu Köln, 27. 9. 2007
Why do we essentially need a synesthetic approach on
sound design? Verband Deutscher Tonmeister:
2nd
international VDT symposium : sounddesign.
Forum am Schlosspark / Ludwigsburg, 1. 11. 2007
Synästhetisches
Design – multi-sensuelle Gestaltung in der
angewandten
Kunst. Ringvorlesung „Sehen mit allen
Sinnen. Hören,
Schmecken, Riechen und Fühlen in der
Kunst". Ludwig-Maximilians-
Universität München, 10. 7. 2008
Geräuschbilder
gestalten: Verbindungen zwischen
auditiven und
visuellen Merkmalen.
- Conference: Fahrzeuggeräusche (vehicle noise). Haus der Technik,
Essen, 25.11.2008
- Lecture during the workshop sound
sense of Kunsthochschule für
Medien (Academie of Media Arts)
KHM, Köln, 6. 6. 2009
Synesthetic design for systematic figuration of intuitive product
features.
Synästhetisches
Design - Kreative Produktentwicklung für alle Sinne.
Netzwerk Design & Medien, Design-Tagung-09 „Gutes Design ist mehr als
eine schöne Form!“ Fachhochschule Salzburg, Campus Kuchl, 12. 11. 2009
Sound-Color-Space – Synesthetic Design. Audio-Branding
Conference.
Hamburg,
5. 11. 2010
Multisensuelle
Referenzen bei der Wahrnehmung von Geräuschen.
Multisensory Perception. Workshop of
DEGA.
Bergische
Universität Wuppertal, 5. 2. 2011
Entwicklung
von Konzepten für die Gestaltung innovativer Geräusche
auf
Grundlage multisensueller Aspekte der Wahrnehmung. DEGA-
Symposium E-Mobilität & Akustik. Hochschule
für Technik Stuttgart,
21.10.2011
International Conference on Synesthesia Research
from left to right: Christine Söffing (
Jörg Jewanski
(Münster) Birgit Gaschler
(Magdeburg) Michael Haverkamp
(Köln)
Anina
Rich (