SysSon - eine systematische Methode zur Entwicklung von Sonifikationen
SysSon - A systematic procedure to develop sonifications
Wissenschaftsdisziplinen
Andere Naturwissenschaften (90%); Geowissenschaften (5%); Kunstwissenschaften (5%)
Keywords
-
Sonification,
Data exploration,
Auditory Display,
Climate Science,
Perceptualization
Sonifikation ist das akustische Analogon zur Datenvisualisierung. Zu den aktuellen Forschungsthemen gehören Parameter-mapping, Audifikation, Modell-basierte Sonifikation und ikonografische Darstellungen wie z.B. auditory icons. Verschiedene Kombinationen dieser Methoden nutzen auf vielfältige Weise das Potential der menschlichen Wahrnehmungsfähigkeit und kognitiven Leistung. Sonifikation ist besonders gut für die Erstanalyse komplexer, dynamischer und mehrdimensionaler Daten geeignet. Trotzdem fehlen der Sonifikationscommunity bisher überzeugende Anwendungsbeispiele in der explorativen Forschung. Die Menge an Daten, die heute produziert werden, steigt ständig. Sowohl Wissenschaft als auch Gesellschaft brauchen neue Methoden, damit umzugehen. In SysSon werden wir eine Systematik erarbeiten, um Sonifikationen für die führenden Wissenschaftsdomänen zu entwickeln. In einer Doktorarbeit wird die Systematik auf Klimadaten angewandt, um damit ein Fallbeispiel einer systematischen Sonifikation von explorativen Daten zu schaffen. Der Forschungsansatz von SysSon beinhaltet drei wesentliche Schritte, die auf alle relevanten Hindernisse eingehen, die der Anwendung von Sonifikationen üblicherweise entgegenstehen. Erstens werden wir die Metaphern der Domänenwissenschaft analysieren, und daraus im Rahmen einer Masterarbeit eine Klangbibliothek ableiten, die für das Gebiet spezifisch ist. Dadurch wird die interdisziplinäre Kommunikation über die Projektergebnisse ermöglicht. Außerdem werden die Sonifikationen ausgehend von der Analyse der Mankos von bestehenden Visualisierungstools entwickelt. Zweitens werden die prototypischen Entwicklungen der Sonifikation mehrfach von vier verschiedenen Gruppen evaluiert: Domänenwissenschafter_Innen und ästhetisch geschulte Personen werden in zyklischen Evaluierungsrunden befragt; Sonifikationsexpert_Innen analysieren die Projektergebnisse in einem abschließenden Workshop; und die breite Öffentlichkeit wird indirekt in einer Medieninstallation als Testpublikum herangezogen. Drittens wird bei Projektende ein einfaches Open-Source-Programm zur Verfügung stehen, das genau auf die Bedürfnisse und Softwareumgebung der Klimawissenschafter_Innen abgestimmt bzw. kompatibel ist. Das Institut für Elektronische Musik und Akustik (IEM) der Kunstuniversität Graz hat viel Erfahrung mit der Sonifikation von abstrakten Daten, und wird SysSon hauptverantwortlich erarbeiten. Als Kooperationspartner agieren das Wegener Zentrum für Klima und Globalen Wandel, eine international führende Einrichtung der Klimaforschung, und das Zentrum für Systematische Musikwissenschaft der Karl-Franzens-Universität Graz, das für den ästhetischen Teil der Evaluierung und die Klangbibliothek zuständig sein wird. SysSon wird zu einer objektiveren, direkten Entwicklung von Sonifikationen führen, und ihre Anwendung in verschiedenen Wissenschaftsgebieten erleichtern. Die erarbeiteten Konventionen betreffen nicht gebrauchsfertige Sonifikationen, sondern ihren Entwicklungsprozess, das Kommunizieren ihres Potentials, und die systematische Qualitätskontrolle.
Im Projekt SysSon wurde Sonifikation, das akustische Pendant zur Visualisierung, für die Klimaforschung entwickelt. Klimaforschung verwendet heute sehr große Datensätze, die üblicherweise visualisiert werden. Dabei stößt man an die Grenzen der Darstellbarkeit. Ein neuer Ansatz ist die Sonifikation: die Mustererkennung des menschlichen Gehörs wird verwendet, um neue Einblicke in Klimaprozesse zu gewähren. Der Fokus des Projektes lag dabei auf der Entwicklung eines systematischen Ablaufs, um es Klimaforschenden zu ermöglichen, ihre Daten selbst zu sonifizieren. Technische Hürden, wie die Kompatibilität zwischen den Daten und Klangsynthese-Programmen, wurden durch die Entwicklung eines Open Source Programmes überwunden SysSon steht auf https://github.com/iem-projects/sysson frei zum Download zur Verfügung. Darüberhinaus wurden in der interdisziplinären Arbeit Kommunikationshürden bearbeitet, da zum Beispiel, für Klimaforschende der Umgang mit Klang als Medium ungewohnt ist sowie für SonifikationsexpertInnen die Terminologie der Klimawissenschaft. Daher wurde eine Reihe von Evaluierungsmethoden aus dem User Centered Design eingesetzt. Der Ablauf von Evaluierungen, Design und Entwicklung wurde im Projekt allgemein reflektiert, sodass der Prozess der systematischen Sonifikation auch auf andere Wissenschaftsgebiete übertragbar ist. Da Sonifikation eine Querschnittsmaterie zwischen Wissenschaft und Kunst ist, wurden im Projekt auch zwei Klanginstallationen mitentwickelt die sich mit Klimadaten befassen. Die Klima-Anlage ist ein gemeinsames Projekt mit dem Deutschlandradio Kultur und weiteren Partnern (http://www.klima-anlage.org). Aufbereitete Klimadaten werden in einer interaktiven Klang- und Rauminstallation sinnlich erfahrbar. Die Ausstellung wurde im September 2015 in Berlin eröffnet, weitere Ausstellungen sind in Vorbereitung. Weiters wurde die Kunstinstallation Turbulenz ein Klima-Klang-Portrait im November 2014 im Forum Stadtpark, Graz, Österreich, präsentiert und das Thema Klima einer breiten Öffentlichkeit vermittelt.
- Gottfried Kirchengast, Universität Graz , assoziierte:r Forschungspartner:in
- Richard Parncutt, Universität Graz , assoziierte:r Forschungspartner:in
Research Output
- 3 Zitationen
- 14 Publikationen
-
2018
Titel Klima|Anlage—Performing Climate Data DOI 10.1007/978-3-319-98294-6_21 Typ Book Chapter Autor Groß-Vogt K Verlag Springer Nature Seiten 339-355 -
2014
Titel Contextual Inquiry for a Climate Audio Interface. Typ Book Chapter Autor Goudarzi V -
2013
Titel User Centered Audio Interface for Climate Science. Typ Conference Proceeding Abstract Autor Goudarzi V Konferenz Proceedings of the Interactive Sonification Workshop, ISon 2013, Erlangen, Germany -
2015
Titel The SysSon platform: A computer music perspective of sonification. Typ Conference Proceeding Abstract Autor Höldrich R Et Al Konferenz Proc. of the 21st International Conference on Auditory Display (ICAD-'15), Graz -
2015
Titel SysSon - A Framework for Systematic Sonification Design. Typ Conference Proceeding Abstract Autor Parncutt R Et Al Konferenz Poster presented at EGU-European Geosciences Union General Assembly, Vienna, Austria -
2014
Titel SysSon: A Sonification Platform for Climate Data. Typ Conference Proceeding Abstract Autor Goudarzi V Konferenz Poster presented at EGU-European Geosciences Union General Assembly, Vienna, Austria -
2015
Titel Reflections on an interdisciplinary design process using a sonification Framework. Typ Conference Proceeding Abstract Autor Goudarzi V Konferenz Proc. of the 21st International Conference on Auditory Display (ICAD-'15), Graz -
2012
Titel SYSSON: A Systematic Procedure to Develop Sonifications. Typ Conference Proceeding Abstract Autor Höldrich R Et Al Konferenz Extended Abstract in Proc. of the 18th International Conference on Auditory Display, ICAD 2012, Atlanta -
2013
Titel SYSSON DOI 10.1145/2468356.2468701 Typ Conference Proceeding Abstract Autor Goudarzi V Seiten 1921-1924 -
2013
Titel SYSSON: A Systematic Procedure to Develop Sonifications. Typ Conference Proceeding Abstract Autor Goudarzi V -
2013
Titel SysSon: A Systematic design for the Sonification of radio occultation data. Typ Conference Proceeding Abstract Autor Jury M Et Al Konferenz Poster presented at the International Workshop on Occultations for Probing Atmosphere and Climate - OPAC-IROWG 2013 , Seggau Castle, Austria, September 2013 -
2013
Titel Sonification of Climate Data. Typ Conference Proceeding Abstract Autor Goudarzi V Konferenz Poster presented at EGU-European Geosciences Union General Assembly, Vienna, Austria -
2013
Titel Evaluating Aesthetics in Sonifications. Typ Conference Proceeding Abstract Autor Parncutt R Et Al Konferenz Eds. P. Strumillo, M. Bujacz, & M. Popielata, in Proc. 19th of the International Conference on Auditory Display (ICAD-'13), Lodz -
2013
Titel Contextual Inquiry for a Climate Audio Interface. Typ Conference Proceeding Abstract Autor Goudarzi V Konferenz Proceedings of the Interfaces and Human Computer Interaction, IHCI 2013, Prague, Czech Republic