Le monde du divertissement numérique connaît depuis plusieurs années une évolution majeure avec la démocratisation des technologies vidéo 3D. Il est désormais commun de visualiser des vidéos stéréoscopiques sur différents supports : au cinéma, à la télévision, dans les jeux vidéos, etc. L'image 3D a considérablement évolué mais qu'en est-il des technologies de restitution sonore associées ? La plupart du temps, le son qui accompagne la vidéo 3D est basé sur des effets de latéralisation, plus au moins étendus (stéréophonie, systèmes 5.1). Il est pourtant naturel de s'interroger sur le besoin d'introduire des événements sonores en lien avec l'ajout de cette nouvelle dimension visuelle : la profondeur. Plusieurs technologies semblent pouvoir offrir une description sonore 3D de l'espace (technologies binaurales, Ambisonics, Wave Field Synthesis). Le recours à ces technologies pourrait potentiellement améliorer la qualité d'expérience de l'utilisateur, en termes de réalisme tout d'abord grâce à l'amélioration de la cohérence spatiale audio-visuelle, mais aussi en termes de sensation d'immersion. Afin de vérifier cette hypothèse, nous avons mis en place un système de restitution audio-visuelle 3D proposant une présentation visuelle stéréoscopique associée à un rendu sonore spatialisé par Wave Field Synthesis. Trois axes de recherche ont alors été étudiés : 1 / Perception de la distance en présentation unimodale ou bimodale. Dans quelle mesure le système audio-visuel est-il capable de restituer des informations spatiales relatives à la distance, dans le cas d'objets sonores, visuels, ou audio-visuels ? Les expériences menées montrent que la Wave Field Synthesis permet de restituer la distance de sources sonores virtuelles. D'autre part, les objets visuels et audio-visuels sont localisés avec plus de précisions que les objets uniquement sonores. 2 / Intégration multimodale suivant la distance. Comment garantir une perception spatiale audio-visuelle cohérente de stimuli simples ? Nous avons mesuré l'évolution de la fenêtre d'intégration spatiale audio-visuelle suivant la distance, c'est-à-dire les positions des stimuli audio et visuels pour lesquelles la fusion des percepts a lieu. 3 / Qualité d'expérience audio-visuelle 3D. Quel est l'apport du rendu de la profondeur sonore sur la qualité d'expérience audio-visuelle 3D ? Nous avons tout d'abord évalué la qualité d'expérience actuelle, lorsque la présentation de contenus vidéo 3D est associée à une bande son 5.1, diffusée par des systèmes grand public (système 5.1, casque, et barre de son). Nous avons ensuite étudié l'apport du rendu de la profondeur sonore grâce au système audio-visuel proposé (vidéo 3D associée à la Wave Field Synthesis). / The digital entertainment industry is undergoing a major evolution due to the recent spread of stereoscopic-3D videos. It is now possible to experience 3D by watching movies, playing video games, and so on. In this context, video catches most of the attention but what about the accompanying audio rendering? Today, the most often used sound reproduction technologies are based on lateralization effects (stereophony, 5.1 surround systems). Nevertheless, it is quite natural to wonder about the need of introducing a new audio technology adapted to this new visual dimension: the depth. Many alternative technologies seem to be able to render 3D sound environments (binaural technologies, ambisonics, Wave Field Synthesis). Using these technologies could potentially improve users' quality of experience. It could impact the feeling of realism by adding audio-visual spatial congruence, but also the immersion sensation. In order to validate this hypothesis, a 3D audio-visual rendering system is set-up. The visual rendering provides stereoscopic-3D images and is coupled with a Wave Field Synthesis sound rendering. Three research axes are then studied: 1/ Depth perception using unimodal or bimodal presentations. How the audio-visual system is able to render the depth of visual, sound, and audio-visual objects? The conducted experiments show that Wave Field Synthesis can render virtual sound sources perceived at different distances. Moreover, visual and audio-visual objects can be localized with a higher accuracy in comparison to sound objects. 2/ Crossmodal integration in the depth dimension. How to guarantee the perception of congruence when audio-visual stimuli are spatially misaligned? The extent of the integration window was studied at different visual object distances. In other words, according to the visual stimulus position, we studied where sound objects should be placed to provide the perception of a single unified audio-visual stimulus. 3/ 3D audio-visual quality of experience. What is the contribution of sound depth rendering on the 3D audio-visual quality of experience? We first assessed today's quality of experience using sound systems dedicated to the playback of 5.1 soundtracks (5.1 surround system, headphones, soundbar) in combination with 3D videos. Then, we studied the impact of sound depth rendering using the set-up audio-visual system (3D videos and Wave Field Synthesis).

In dieser Arbeit wurden nutzbringende Anwendungsmöglichkeiten für monoskopische und (auto)stereoskopische 3D-Anzeigen in Fahrzeugen theoretisch hergeleitet und empirisch überprüft. Zur Ableitung der Hypothesen wurde für jede Teilaufgabe anhand eines Fragenkatalogs zu den Vor- und Nachteilen von 3D-Anzeigen untersucht, inwieweit deren Bearbeitung davon profitiert, dass Informationen räumlich abgebildet werden. Die erwiesenen 3D-Vorteile wurden zu fünf Kategorien zusammengefasst: Integration, räumliche Kompatibilität, Aufmerksamkeitslenkung, Bildhaftigkeit und Attraktivität. Da der wesentliche 3D-Vorteil für Anzeigen in Fahrzeugen in einer räumlich kompatiblen Informationsdarstellung aus der Fahrerperspektive gesehen wurde, lag der Schwerpunkt der empirischen Arbeit auf 3D-Anzeigen für Fahrerassistenzsysteme (FAS). Am Beispiel einer 3D-Anzeige des Abstandsregeltempomaten (ART) wurde nachgewiesen, dass die Vorteile von 3D-Anzeigen für FAS in einer Erhöhung der Attraktivität und Akzeptanz sowie in einer Verbesserung des unmittelbaren Verständnisses im Vergleich zu 2D-Anzeigen liegen. Gleichzeitig wurden mit optimal gestalteten 3D-Anzeigen keine Nachteile in der Wahrnehmungssicherheit und Ablenkungswirkung festgestellt. Anhand der Literaturanalyse und der empirischen Ergebnisse wurden Gestaltungshinweise für 3D-Anzeigen in Fahrzeugen formuliert. Der erwartete 3D-Vorteil einer kompatiblen Darstellung stellte sich bei einer konstanten Anordnung der Informationen nicht ein, bleibt aber für Aufgaben mit einem kontinuierlichen Abgleich (z.B. Navigation) zu überprüfen. Die stereoskopische Darbietung erbrachte keinen besonderen Nutzen. Das fahrzeugtaugliche ASD erhöhte sogar die Reaktionszeiten. Insgesamt sprechen die Ergebnisse für eine gezielte Verwendung bildhafter monoskopischer 3D-Anzeigen für FAS und ausgewählte räumliche Funktionen, welche sich anhand von Begriffen und abstrakten Symbolen nur schwer erläutern lassen. / This thesis consists of the theoretical deduction and empirical evaluation of useful applications for monoscopic and (auto)stereoscopic 3D-displays in vehicles. For deducting hypotheses concerning the benefits and limits of 3D-displays, each subtask was tested for its potential benefits from a 3D-information presentation using a catalogue of confirmed advantages and disadvantages of 3D-displays. The proven 3D-advantages were summarized in five categories: integration, spatial compatibility, direction of attention, concreteness and attractiveness. Because it was presumed, that 3D-displays in vehicles are especially favorable for representing information about the vehicle surrounding in a 3D-perspective compatible to the drivers view, the empirical part was mainly focused on the application of 3D-displays for driver assistance systems. Using a 3D-display for adaptive cruise control (ACC), a general increase of attractiveness, acceptance and immediate comprehension for 3D-displays in comparison to conventional 2D-displays was confirmed. Simultaneously, well designed 3D-displays did not compromise perceptional safety and driver distraction. Design guidelines for 3D-displays in vehicles were concluded from the evaluation results and from literature analysis. Even though the expected 3D-benefit of spatially compatible information displays from the driver’s perspective was not confirmed for driver assistance systems like ACC with a constant layout of information, it still remains to be tested for continuous matching tasks like navigational checking in cars. The stereoscopic presentation of 3D-displays did not show advantages. On the contrary, an in-vehicle ASD even increased reaction times. In summery, the results suggest a distinctive application of well designed concrete and monoscopic 3D-displays for driver assistance systems and selected spatial functions which are difficult to explain using abstract notions or symbols.