Virtuelle Akustik: Lokalisationsmodell & numerische Simulationen
Virtual Acoustics: Localization Model & Numeric Simulations
Wissenschaftsdisziplinen
Informatik (40%); Physik, Astronomie (10%); Psychologie (50%)
Keywords
-
Spatial Hearing,
Virtual Acoustics,
Head-Related Transfer Functions (Hrtfs),
Sound Localization Model,
Photometric Reconstruction,
Boundary-Element Method (Bem)
Die Lokalisation von Schallquellen ist eine wichtige Aufgabe des menschlichen Gehörs. Die räumliche Wiedergabe von Schallquellen über Kopfhörer ist eines der Ziele von virtueller Akustik. Obwohl die Mechanismen der Schallquellenlokalisation noch nicht komplett geklärt sind, können Außenohrübertragungsfunktionen (engl.: head- related transfer functions, HRTFs) verwendet werden, um räumliche Schallquellen virtuell darzubieten. HRTFs beschreiben die Filterwirkung der Pinna, des Kopfes und des Torso auf den abgestrahlten Schall einer Quelle und hängen daher stark von der Anatomie der Hörenden ab. Für eine realistische Schallquellenwiedergabe über Kopfhörer müssen die individuellen HRTFs einer Person gemessen werden. Die derzeit verfügbare akustische Messung ist technisch aufwändig, dauert 10 bis 20 Minuten und erfordert Platzierung eines Mikrofons im Ohrkanal des Zuhörers. Als eine Alternative zur akustischen Messung haben wir (als Teil des FWF-Projekts P18401-B15) Laser-Scans von Personen verwendet, um die Geometrie ihrer Köpfe in Form eines geometrischen 3-D Gitters zu erfassen und ihre HRTFs mit numerischen Methoden zu berechnen. Unsere Resultate zeigen, dass eine numerische Berechnung der HRTFs grundsätzlich möglich ist. Gleichzeitig erwies sich aber die perzeptive Evaluierung aufgrund der hohen Anzahl an Parametern als langwierig und problematisch. Es wurde klar, dass ein Lokalisationsmodell zur Vorhersage der Lokalisationsleistung notwendig ist, um die Anzahl der Testbedingungen für die endgültige perzeptive Evaluierung in psychoakustischen Experimenten zu reduzieren. In LocaPhoto wird ein funktionales Vorhersage-Modell für die Schallquellenlokalisation entwickelt, dass neueste Erkenntnisse aus der Neurophysiologie und Psychoakustik vereint. Das Modell wird die perzeptive Evaluierung von HRTFs ermöglichen und als funktionale Modell zur Untersuchung grundlegender Aspekte des räumlichen Hörens auch außerhalb von LocaPhoto beitragen. Weiters wird unsere Arbeit an der numerischen Berechnung der HRTFs fortgeführt mit dem Ziel, perzeptiv validierte HRTFs aus visuell erfassten Daten berechnen zu können. Basierend auf den Erfahrungen aus dem oben erwähnten Projekt wird die Qualität der Berechnung verbessert werden, indem das 3-D Gitter aus 2-D Fotografien mit Hilfe photogrammetrischer Rekonstruktion generiert wird. In der numerischen Berechnung der HRTFs erwarten wir hunderte von Testbedingungen. Das Lokalisationsmodell wird die perzeptiv interessanten Testbedingungen selektieren und somit die für die darauf folgende psychoakustische Evaluierung erforderliche Menge an Experimenten reduzieren. Dennoch werden alle relevanten Ergebnisse der numerischen Berechnung psychoakustisch validiert. Die parallele Arbeit an beiden Zielen, dem Schallquellenlokalisationsmodell und der numerischen Berechnungsmethode für HRTFs, ermöglicht die Ausnutzung von Synergieeffekten und verstärkt somit die Erfolgschancen für LocaPhoto.
Die räumliche Wahrnehmung von Schallquellen ist ein wichtiger Aspekt unseres täglichen Hörens. Ihrer Erforschung widmet sich die binaurale virtuelle Akustik, die zu ihren Zielen die Wiedergabe virtueller räumlicher Schallquellen über Kopfhörer zählt. Dabei können die so genannten HRTFs (aus dem Englischen: head-related transfer functions) verwendet werden, um Schallquellen virtuell räumlich darzubieten. HRTFs beschreiben die Filterwirkung der Ohrmuschel, des Kopfes und des Torsos auf den abgestrahlten Schall einer Quelle und hängen somit stark von der Anatomie der Hörenden ab. Für eine realistische Schallquellenwiedergabe über Kopfhörer müssen daher die individuellen HRTFs einer Person zur Verfügung stehen. Üblicherweise werden die HRTFs akustisch in einer technisch komplexen Prozedur gemessen, die 10 bis 20 Minuten dauert und die Platzierung eines Mikrofons im Ohrkanal des Zuhörers erfordert. Eine Evaluierung der gemessenen HRTFs ist dabei nur in aufwändigen psychoakustischen Experimenten möglich. In dem nun beendeten FWF-Projekt LocaPhoto wurden zwei Ziele verfolgt: eine verbesserte Erfassung von HRTFs sowie deren modelbasierende Evaluierung.Für das erste Ziel wurde eine Methode zur einfacheren Erfassung der HRTFs ausgearbeitet. Dabei lag der Fokus auf der computergestützten Berechnung der HRTFs basierend auf der 3-dimensionalen Geometrie eines Hörers. In der entwickelten Methode werden Fotos vom Kopf und Ohren des Hörers gemacht, die als Grundlage für photogrammetrische Rekonstruktion dienen: aus der Vielzahl von 2- dimensionalen Fotos wird die 3-dimensionale Geometrie der Hörers gerechnet. In dieser Geometrie werden virtuell Mikrofone in den Ohrkanälen sowie Schallquellen um den Kopf platziert. Eine numerische Simulation der Schallausbreitung in dieser Geometrie liefert schlussendlich die individuellen HRTFs des Hörers bereit für die personalisierte Wiedergabe von räumlichen Schallquellen über Kopfhörer.Für die Evaluierung wurde ein Modell der räumlichen Wahrnehmung entwickelt. Dieses Modell basiert auf funktioneller Abbildung verschiedener Stufen des menschlichen Gehörs. Es berechnet die Lokalisationsleistung in vertikalen Ebenen basierend auf HRTFs und weiteren Parametern. In LocaPhoto diente dieses Modell in erster Linie zur Validierung der numerisch simulierten HRTFs und zur Verbesserung des Simulationsprozesses. Darüber hinaus hilft dieses Modell aber auch dem besseren Verständnis unseres auditorischen Systems. Es ist im frei verfügbaren Softwarepaket Auditory Modeling Toolbox implementiert und wird auch in der Zukunft zur Untersuchung grundlegender Aspekte des räumlichen Hörens beitragen.
- Stefan Maierhofer, VRVis Zentrum für Virtual Reality und Visualisierung , assoziierte:r Forschungspartner:in
Research Output
- 422 Zitationen
- 51 Publikationen
-
2012
Titel A probabilistic model for sound-source localization in sagittal planes. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz presented at the LocaPhoto Workshop, Wien -
2012
Titel ExpSuite: Software-Framework zur Durchführung psychoakustischer Experimente. Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz presented at the 62th Jahrestagung der Österreichischen Physikalischen Gesellschaft (ÖPG), Graz -
2012
Titel Modeling sound-localization performance in vertical planes: level dependence. Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz poster at the 16th International Symposium on Hearing, Cambridge, UK -
2012
Titel Vertical-plane sound localization and spectral profile Analysis. Typ Conference Proceeding Abstract Autor Laback B Konferenz presented at the LocaPhoto Workshop, Wien -
2012
Titel Modelle zur Vorhersage der Schallquellenlokalisation in Sagittalebenen. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz presented at the 62th Jahrestagung der Österreichischen Physikalischen Gesellschaft (ÖPG), Graz -
2012
Titel Numerische Berechnung von Außenohrübertragungsfunktion Typ Conference Proceeding Abstract Autor Majdak P Et Al Konferenz presented at the 62th Jahrestagung der Österreichischen Physikalischen Gesellschaft (ÖPG), Graz -
2016
Titel Modeling the Effects of Sensorineural Hearing Loss on Sound Localization in the Median Plane DOI 10.1177/2331216516662003 Typ Journal Article Autor Baumgartner R Journal Trends in Hearing Seiten 2331216516662003 Link Publikation -
2015
Titel Personalized HRTF rendering using Web Audio API. Typ Conference Proceeding Abstract Autor Geronazzo M Konferenz presented at the 1st Web Audio Conference, Paris, France -
2014
Titel Non-uniform sampling of geometry for the numeric simulation of head-related transfer functions. Typ Conference Proceeding Abstract Autor Kreuzer W Et Al Konferenz the proceedings of the 21st International Congress on Sound and Vibration (ICSV), Beijing, China -
2014
Titel Simulation of perceptually valid head-related transfer functions. Typ Conference Proceeding Abstract Autor Majdak P Et Al Konferenz presented at the 6th Congress of the Alps-Adria Acoustics Association (AAAA), Graz, Austria -
2014
Titel Efficient Numerical Calculation of Head-Related Transfer Functions. Typ Conference Proceeding Abstract Autor Kreuzer W Et Al Konferenz the proceedings of the 7th Forum Acusticum, Kraków, Poland -
2014
Titel Modeling human sound-source localization with the Auditory Modeling Toolbox. Typ Conference Proceeding Abstract Autor Majdak P Konferenz the proceedings of the 21st International Congress on Sound and Vibration (ICSV), Beijing, China -
2014
Titel Modeling the direction-continuous time-of-arrival in head-related transfer functions DOI 10.1121/1.4863196 Typ Journal Article Autor Ziegelwanger H Journal The Journal of the Acoustical Society of America Seiten 1278-1293 Link Publikation -
2014
Titel Modeling sound-source localization in sagittal planes for human listeners DOI 10.1121/1.4887447 Typ Journal Article Autor Baumgartner R Journal The Journal of the Acoustical Society of America Seiten 791-802 Link Publikation -
2015
Titel Modellierung der Schalllaufzeit in Außenohrübertragungsfunktionen für beliebige Schallquellen- und Hörerpositionen. Typ Conference Proceeding Abstract Autor Majdak P Konferenz presented at the 41st German Convention on Acoustics (DAGA), Nürnberg, Germany -
2015
Titel Mesh2HRTF: An open-source software package for the numerical calculation of head-related transfer functions. Typ Conference Proceeding Abstract Autor Madjak P Et Al Konferenz in the proceedings of the 22nd International Congress on Sound and Vibration (ICSV), Florence, Italy. -
2016
Titel A priori mesh grading for the numerical calculation of the head-related transfer functions DOI 10.1016/j.apacoust.2016.07.005 Typ Journal Article Autor Ziegelwanger H Journal Applied Acoustics Seiten 99-110 Link Publikation -
2016
Titel Modellierung von Schallquellenlokalisation in Sagittalebenen bei cochlearer Horschädigung. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz presented at the 42nd German Convention on Acoustics (DAGA), Aachen, Germany. -
2016
Titel A framework for geometry acquisition, 3-D printing, simulation, and measurement of head-related transfer functions with a focus on hearing-assistive devices DOI 10.1016/j.cad.2016.02.006 Typ Journal Article Autor Harder S Journal Computer-Aided Design Seiten 39-46 Link Publikation -
2016
Titel Modeling the Effect of Peripheral Hearing Disorders on Auditory Localization in Sagittal Planes. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz presented at the 39th Midwinter Meeting of the Association for Research in Otolaryngology (ARO), San Diego, USA -
2013
Titel The Auditory Modeling Toolbox DOI 10.1007/978-3-642-37762-4_2 Typ Book Chapter Autor Søndergaard P Verlag Springer Nature Seiten 33-56 -
2013
Titel Modeling Human Localization Performance of Sound Sources in Sagittal Planes. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz presented at the AIA-DAGA 2013 Conference on Acoustics, Merano, Italy -
2015
Titel Horerspezifische Lokalisationsleistung von Schallquellen: Eine Frage der Ohren? Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz presented at the 41st German Convention on Acoustics (DAGA), Nürnberg, Germany -
2015
Titel Reliability in Measuring Head Related Transfer Functions of Hearing Aids DOI 10.3813/aaa.918900 Typ Journal Article Autor Harder S Journal Acta Acustica united with Acustica Seiten 1064-1066 Link Publikation -
2015
Titel Modeling Localization of Amplitude-Panned Virtual Sources in Sagittal Planes. DOI 10.17743/jaes.2015.0063 Typ Journal Article Autor Baumgartner R Journal Journal of the Audio Engineering Society. Audio Engineering Society Seiten 562-569 Link Publikation -
2015
Titel Efficient Approximation of Head-Related Transfer Functions in Subbands for Accurate Sound Localization DOI 10.1109/taslp.2015.2425219 Typ Journal Article Autor Marelli D Journal IEEE/ACM Transactions on Audio, Speech, and Language Processing Seiten 1130-1143 -
2015
Titel Numerical calculation of listener-specific head-related transfer functions and sound localization: Microphone model and mesh discretization DOI 10.1121/1.4922518 Typ Journal Article Autor Ziegelwanger H Journal The Journal of the Acoustical Society of America Seiten 208-222 Link Publikation -
2015
Titel Listener-Specific Sound-Localization Performance: A Matter of Better Ears? Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz poster at the 38th Midwinter Meeting of the Association for Research in Otolaryngology (ARO), Baltimore, USA -
2013
Titel Spatially oriented format for acoustics: a data exchange format representing head-related transfer functions. Typ Conference Proceeding Abstract Autor Majdak P Konferenz proceedings of the 134th Convention of the Audio Engineering Society (AES), Roma, Italy -
2013
Titel Modeling the broadband time-of-arrival of the head-related transfer functions for binaural Audio. Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz proceedings of the 134th Convention of the Audio Engineering Society, Roma, Italy -
2013
Titel Calculation of listener-specific head-related transfer functions: Effect of mesh quality DOI 10.1121/1.4805374 Typ Journal Article Autor Ziegelwanger H Journal The Journal of the Acoustical Society of America Seiten 3282-3282 -
2013
Titel Sound Localization in Sagittal Planes: Modeling the Level Dependence. Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz poster at the 36th Midwinter Meeting of the Association for Research in Otolaryngology (ARO), Baltimore, MD, USA -
2013
Titel Continuous-direction model of the broadband time-of-arrival in the head-related transfer functions. Typ Conference Proceeding Abstract Autor Majdak P Konferenz proceedings of the International Congress on Acoustics (ICA), Montreal, Canada. -
2013
Titel Evaluation of Methods for Optical 3-D Scanning of Human Pinnas DOI 10.1109/3dv.2013.58 Typ Conference Proceeding Abstract Autor Reichinger A Seiten 390-397 -
2013
Titel Modeling sound localization of amplitude-panned phantom sources in sagittal planes. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz proceedings of the 134th Convention of the Audio Engineering Society, Roma, Italy -
2013
Titel Assessment of Sagittal-Plane Sound Localization Performance in Spatial-Audio Applications DOI 10.1007/978-3-642-37762-4_4 Typ Book Chapter Autor Baumgartner R Verlag Springer Nature Seiten 93-119 -
2013
Titel Effect of element size and microphone model on the numerically calculated HRTFs. Typ Conference Proceeding Abstract Autor Majdak P Et Al Konferenz presented at the AIA-DAGA 2013 Conference on Acoustics, Merano, Italy. -
2013
Titel Sound localization in sagittal planes: Psychoacoustic foundation and models. Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz Hot Topics in Acoustics: Cutting Edge in Spatial Audio (Chapter 2, p. ), edited by Zotter, F. (EAA Documenta Acoustica, online) -
2015
Titel Modeling the Role of Spectral Cues for Sound Localization in Sagittal Planes. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz presented at the 5th International Symposium on Auditory and Audiological Research (ISAAR), Nyborg, Denmark. -
2015
Titel The Reliability of Contralateral Spectral Cues for Sound Localization in Sagittal Planes. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz poster at the 38th Midwinter Meeting of the Association for Research in Otolaryngology (ARO), Baltimore, USA -
2015
Titel Modeling the Role of Spectral Cues for Sound Localization in Sagittal Planes. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz poster presented at the Auditory Modeling Workshop, Oldenburg, Germany -
2014
Titel Die Auditory-Modeling Toolbox der AABBA-Initiative. Typ Conference Proceeding Abstract Autor Blauert J Et Al Konferenz proceedings of the Fortschritte der Akustik - DAGA 2014 -
2014
Titel Spatially Oriented Format for Acoustics (SOFA) for Exchange Data of Head-related Transfer Functions. Typ Journal Article Autor Iwaya Y Journal technical report for the Institute of Electronics, Information and Communication Engineers (IEICE) -
2014
Titel Modellierung spektraler Verarbeitungsmechanismen zur Schallquellenlokalisation in Sagittalebenen. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz presented at the 40th German Convention on Acoustics (DAGA), Oldenburg, Germany -
2014
Titel Modeling the Role of the Dorsal Cochlear Nucleus in Sagittal-Plane Localization of Human Listeners. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz poster at the 37th Midwinter Meeting of the Association for Research in Otolaryngology (ARO), San Diego, CA, USA -
2014
Titel Sound localization with an efficient representation of head-related transfer functions in subbands. Typ Conference Proceeding Abstract Autor Baumgartner R Konferenz the proceedings of the 7th Forum Acusticum, Kraków, Poland -
2014
Titel PHOnA: A Public Dataset of Measured Headphone Transfer Functions. Typ Conference Proceeding Abstract Autor Boren B Konferenz proceedings of the 137th Convention of the Audio Engineering Society, Los Angeles, CA, USA, Convention Paper 9126 -
2014
Titel Acoustic and non-acoustic factors in modeling listener-specific performance of sagittal-plane sound localization DOI 10.3389/fpsyg.2014.00319 Typ Journal Article Autor Majdak P Journal Frontiers in Psychology Seiten 319 Link Publikation -
2014
Titel Sound localization beyond the horizontal plane. Typ Conference Proceeding Abstract Autor Laback B Et Al Konferenz presented at the 6th Congress of the Alps-Adria Acoustics Association (AAAA), Graz, Austria -
2014
Titel Ungleichförmige Geometriediskretisierung für die numerische Berechnung von Außenohrübertragungsfunktionen. Typ Conference Proceeding Abstract Autor Kreuzer W Et Al Konferenz proceedings of the Fortschritte der Akustik - DAGA 2014 -
2014
Titel Combining count-comparison and sagittal-plane localization models towards a three-dimensional representation of sound localization. Typ Conference Proceeding Abstract Autor Altoè A Konferenz the proceedings of the 7th Forum Acusticum, Kraków, Poland