Mit der Interaktionstechnik der "direkten Objektmanipulation" für virtuelle Umgebungen wird angestrebt, virtuelle Objekte genauso realistisch und flexibel handhaben zu können, wie das bei realen Objekten der Fall ist. Das bedeutet, virtuelle Objekte können mittels eines Handmodells direkt berührt, ergriffen, getragen, gedrückt und gezogen werden. Diese Interaktionstechnik findet vor allem dort Anwendung, wo Objektmanipulationen möglichst realistisch simuliert und erfasst werden sollen, z.B. bei Ergonomieuntersuchungen, virtuellem Prototyping, Trainingssimulationen usw. Neben einigen Ansätzen zur technischen Umsetzung von direkten Objektmanipulationen werden in dieser Arbeit vor allem Konzepte und Verfahren entwickelt und vorgestellt, die eine Erfassung und Analyse von Benutzerinteraktionen unter Verwendung dieser Interaktionstechnik ermöglichen. Eine wichtige Rolle spielt dabei die Untersuchung von Greifvorgängen, insbesondere die automatische Erkennung von Greifarten. Dazu wurden mehrere ausführliche empirische Studien mit einer neuartigen systematischen Methodik durchgeführt, woraus sich Empfehlungen für die Wahl von Klassifikationsverfahren und die Zusammensetzung der Merkmale ergeben. Ein weiteres Ergebnis ist eine neue Taxonomie von Greifarten, die speziell auf den Einsatz in virtueller Realität zugeschnitten ist und sich durch die Integration nicht-prehensiler Greifarten auszeichnet. Als weiterer wesentlicher Beitrag wird ein Analyseverfahren vorgestellt, mit dem der kontinuierliche Strom von Bewegungs- und Interaktionsdaten in Sequenzen von diskreten sinntragenden Basisinteraktionen zerlegt werden kann. Diese Sequenzen können anschließend manuell ausgewertet oder im Rahmen des "Action Capture"-Verfahrens in eine abstrakte Aktionsrepräsentation überführt und durch unterschiedliche virtuelle Figuren wiedergegeben werden.

Virtuelle Realität (VR) wird seit Jahrzehnten in Industrie und Forschung sowie im Unterhaltungssektor genutzt. Dabei sind die verwendeten VR-Systeme meist nur auf einen Nutzer ausgelegt, wodurch es für andere Betrachter zu perspektivischen Verzerrungen kommt. Um mehreren Personen ein visuell gleichberechtigtes Nutzen des VR-Systems zu ermöglichen, muss jedem Nutzer eine individuelle Perspektive vermittelt werden. Es wird ein Klassifikationsschema vorgestellt, anhand dessen für verschiedene Interaktionsszenarien Anforderungen für eine derartige Hardwareumsetzung ableitbar sind. Um ausgewählte Aspekte der Mehrbenutzerinteraktionen zu untersuchen, wurde eine Prototypenplattform erstellt, mit der eine vielfältige Palette von Interaktionsszenarien für zwei Nutzer umgesetzt werden kann. Eine parallel zu dieser Arbeit entstandene mehrbenutzerfähige Powerwall und eine Erweiterung dieser zu einer L-Bench wurden genutzt, um mit zwei Studien ausgewählte Aspekte der Interaktion mehrerer Benutzer in VR empirisch zu untersuchen. Dazu wurden zwei Anwendungen kreiert: ein Puzzlespiel, welches eine Informationsasymmetrie zwischen den Nutzern simuliert, sowie ein Objekteinpassungsspiel, welches die Interaktion um eine körperliche Komponente erweitert. Mit diesen wurde untersucht, welche Sichtwechselmetapher zur Auflösung der Asymmetrie am besten geeignet ist.

In der industriellen Fertigung unterliegen die Produkteigenschaften und -parameter, unabhängig vom eingesetzten Fertigungsverfahren, gewissen Streuungen. Im Rahmen der Qualitätsprüfung wird daher ermittelt, inwieweit die festgelegten Qualitätsanforderungen an das Produkt bzw. Werkstück trotz der Fertigungsstreuungen erfüllt werden (Brunner et al. 2011) [...] Insbesondere bei einer visuellen Prüfung durch den Menschen hängt das Ergebnis jedoch sehr stark vom jeweiligen Prüfwerker ab. Die wesentlichen Faktoren für die Erkennungsleistung sind Erfahrung, Qualifizierung und Ermüdung des Prüfers, Umgebungsbedingungen, wie Beleuchtung, Schmutz oder akustische Störfaktoren, aber auch die Anzahl und Gewichtung der zu bewertenden Merkmale (Keferstein et al. 2018). Infolge dessen kann die Zuverlässigkeit und Reproduzierbarkeit der Prüfergebnisse negativ beeinflusst werden. Gleiches gilt für die vollständige und konsistente Dokumentation der Sichtprüfung [...] Vor diesem Hintergrund wird ein Mixed Reality-basiertes Assistenzsystem entwickelt, welches den Prüfwerker bei der Durchführung und Dokumentation der visuellen Sichtprüfung unterstützen soll. Die Anforderungen dieses Ansatzes sind aus einem Kooperationsprojekt in der Automobilindustrie abgeleitet. Das dargestellte Assistenzsystem ist daher Teil von übergeordneten Aktivitäten im Zusammenhang mit 3D-Master und einer zeichnungsfreien Produktdokumentation. [...aus der Einleitung]

Der Beitrag gibt einerseits eine Übersicht über die Möglichkeiten von virtuellen Produktdarstellungen durch Virtual Reality (VR), Augmented Reality (AR) und 360° Medien und vergleicht diese hinsichtlich geeigneter Kriterien um eine gezielte Kommunikation zu erreichen. [... aus der Einleitung]

Im Fokus dieser Arbeit steht die Entwicklung und Realisierung einer Nutzerschnittstelle für die computergestützte Bearbeitung von Oberflächen dreidimensionaler Designobjekte, die durch herkömmliche CAD-Systeme nur unzureichend unterstützt werden können. Es werden Methoden und Algorithmen erarbeitet, um die Interaktion des Benutzers direkt auf Basis der für das Design relevanten 3D Objektoberflächen zu ermöglichen. Den Ausgangspunkt bildet das Proxy-Konzept des Forschungsfeldes zur Mensch-Maschine-Interaktion, in welchem physische Stellvertreterobjekte zur Manipulation virtueller Objekte genutzt werden. Im ersten Teil der Arbeit wird dieses Konzept um eine auf die Oberfläche des bearbeiteten Objektes bezogene Interaktion und Designfunktionalität erweitert. Dazu wird das Konzept eines CAD-Proxys entwickelt und verschiedene Umsetzungen und Anwendungen erläutert. Dabei werden die CAD-Proxys in drei Typen unterschieden. Der exakte CAD-Proxy ermöglicht es, ein virtuelles Objekt mit einem formgleichen, physischen Gegenstück zu bearbeiten. Beim abstrakten CAD-Proxy wird gezeigt, wie auch ein anders geformtes Gegenstück zum Einsatz kommen kann. Der augmentierte CAD-Proxy erlaubt die Anzeige des Designs direkt auf dem physischen Gegenstück. Nutzerstudien belegen, dass die CAD-Proxys zur Erstellung eines Designs auf einer Oberfläche deutlich besser geeignet sind als eine klassische Nutzerschnittstelle. Dies gilt insbesondere für anspruchsvolle Designaufgaben, etwa im künstlerischen Design. Im zweiten Teil der Arbeit wird die Verarbeitung von Linienzügen im Gestaltungsprozess eingeführt, welche das Konzept der aktiven Konturen auf Oberflächen erweitern. Diese Linienzüge werden auf die Form der Oberfläche bezogen verarbeitet und beachten gleichzeitig wichtige Merkmale, wie bspw. die Kanten des Objektes. Es wird ein neues Verfahren vorgestellt, mit dem aktive Konturen auch auf schlecht vernetzten Oberflächen eingesetzt werden können und gleichzeitig Formen flexibler repräsentieren können als bisherige Ansätze. Für den Bezug der Designlinien zur Oberfläche wird eine neue Datenstruktur eingeführt, die ein geometrisches Nachbarschaftsproblem löst. Es wird gezeigt, dass diese Struktur auf den getesteten Objekten mindestens um Faktor 14 schneller ist als alternative Ansätze und auch direkt auf andere Problemstellungen anwendbar ist. Der dritte Teil enthält die Betrachtungen zum Formverständnis der Designobjekte, welche für die Designlinien und die Modellierung der Designobjekte benötigt werden. Dabei kommt die Krümmungsberechnung als etabliertes Werkzeug derartiger Analysen zum Einsatz. Hier wird eine neue Betrachtung erarbeitet, die den Einfluss unterschiedlicher Faktoren auf die Genauigkeit der Krümmungsschätzung und auf die Eignung verschiedener Schätzungsverfahren erstmals umfassend untersucht. Durch die Kombination existierender Verfahren kann das Verfahren der Shape Operator Approximation entwickelt werden, welches Eigenschaften wie Schätzungsgenauigkeit, Performanz und eine einfache Formulierung bekannter Verfahren vereint.

Virtuelle Realität (VR) wird seit Jahrzehnten in Industrie und Forschung sowie im Unterhaltungssektor genutzt. Dabei sind die verwendeten VR-Systeme meist nur auf einen Nutzer ausgelegt, wodurch es für andere Betrachter zu perspektivischen Verzerrungen kommt. Um mehreren Personen ein visuell gleichberechtigtes Nutzen des VR-Systems zu ermöglichen, muss jedem Nutzer eine individuelle Perspektive vermittelt werden. Es wird ein Klassifikationsschema vorgestellt, anhand dessen für verschiedene Interaktionsszenarien Anforderungen für eine derartige Hardwareumsetzung ableitbar sind. Um ausgewählte Aspekte der Mehrbenutzerinteraktionen zu untersuchen, wurde eine Prototypenplattform erstellt, mit der eine vielfältige Palette von Interaktionsszenarien für zwei Nutzer umgesetzt werden kann. Eine parallel zu dieser Arbeit entstandene mehrbenutzerfähige Powerwall und eine Erweiterung dieser zu einer L-Bench wurden genutzt, um mit zwei Studien ausgewählte Aspekte der Interaktion mehrerer Benutzer in VR empirisch zu untersuchen. Dazu wurden zwei Anwendungen kreiert: ein Puzzlespiel, welches eine Informationsasymmetrie zwischen den Nutzern simuliert, sowie ein Objekteinpassungsspiel, welches die Interaktion um eine körperliche Komponente erweitert. Mit diesen wurde untersucht, welche Sichtwechselmetapher zur Auflösung der Asymmetrie am besten geeignet ist.

Motion capture is the process to record the movement of a human. To accomplish this, a hybrid tracking system is used. It combines an optic tracking system with a magnetic one to compensate shortcomings and effectively use their advantages. Another part of this work copes with the conversion of the tracking data into skeletal information and related topics like skeleton definition, skeleton fitting or parameterization of joint rotations. / Mittels Motion Capture werden die Bewegungen eines Menschen in computerlesbare Form überführt. Dazu wird ein hybrides Trackingsystem verwendet, das durch Kombination eines optischen mit einem magnetischen System entsteht und die Schwächen der Einzelsysteme kompensiert. Neben der Realisierung dieses Hybridsystems steht die Übertragung der gewonnenen Bewegungsdaten auf ein Skelettmodell und damit verbundene Fragen, wie Skelettdefinition, Skelettanpassung oder Beschränkung der Gelenkrotationen im Vordergrund.

The analysis of heterogeneous, complex data sets has become important in many scientific domains. With the help of scientific visualization, researchers can be supported in exploring their research results. One domain, where researchers have to deal with spatio-temporal data from different sources including simulation, observation and time-independent data, is meteorology. In this thesis, a concept and workflow for the 3D visualization of meteorological data was developed in cooperation with domain experts. Three case studies have been conducted based on the developed concept. In addition, the concept has been enhanced based on the experiences gained from the case studies. In contrast to existing all-in-one software applications, the proposed workflow employs a combination of existing software applications and their extensions to make a variety of already implemented visualization algorithms available. The workflow provides methods for data integration and for abstraction of the data as well as for generating representations of the variables of interest. Solutions for visualizing sets of variables, comparing results of multiple simulation runs and results of simulations based on different models are presented. The concept includes the presentation of the visualization scenes in virtual reality environments for a more comprehensible display of multifaceted data. To enable the user to navigate within the scenes, some interaction functionality was provided to control time, camera, and display of objects. The proposed methods have been selected with respect to the requirements defined in cooperation with the domain experts and have been verified with user tests. The developed visualization methods are used to analyze and present recent research results as well as for educational purposes. As the proposed approach uses generally applicable concepts, it can also be applied for the analysis of scientific data from other disciplines. / In nahezu allen Wissenschaftsdisziplinen steigt der Umfang erhobener Daten. Diese sind oftmals heterogen und besitzen eine komplexe Struktur, was ihre Analyse zu einer Herausforderung macht. Die wissenschaftliche Visualisierung bietet hier Möglichkeiten, Wissenschaftler bei der Untersuchung ihrer Forschungsergebnisse zu unterstützen. Eine der Disziplinen, in denen räumlich-zeitliche Daten aus verschiedenen Quellen inklusive Simulations- und Observationsdaten eine Rolle spielen, ist die Meteorologie. In dieser Arbeit wurde in Zusammenarbeit mit Experten der Meteorologie ein Konzept und ein Workflow für die 3D-Visualisierung meteorologischer Daten entwickelt. Dabei wurden drei Fallstudien erarbeitet, die zum einen auf dem erstellten Konzept beruhen und zum anderen durch die während der Fallstudie gesammelten Erfahrungen das Konzept erweiterten. Der Workflow besteht aus einer Kombination existierender Software sowie Erweiterungen dieser. Damit wurden Funktionen zur Verfügung gestellt, die bei anderen Lösungsansätzen in diesem Bereich, die oft nur eine geringere Anzahl an Funktionalität bieten, nicht zur Verfügung stehen. Der Workflow beinhaltet Methoden zur Datenintegration sowie für die Abstraktion und Darstellung der Daten. Es wurden Lösungen für die Visualisierung einer Vielzahl an Variablen sowie zur vergleichenden Darstellung verschiedener Simulationsläufe und Simulationen verschiedener Modelle präsentiert. Die generierten Visualisierungsszenen wurden mit Hilfe von 3D-Geräten, beispielsweise eine Virtual-Reality-Umgebung, dargestellt. Die stereoskopische Projektion bietet dabei die Möglichkeit, diese komplexen Daten mit verbessertem räumlichem Eindruck darzustellen. Um dem Nutzer eine umfassende Analyse der Daten zu ermöglichen, wurden eine Reihe von Funktionen zur Interaktion zur Verfügung gestellt, um beispielsweise Zeit, Kamera und die Anzeige von 3D-Objekten zu steuern. Das Konzept und der Workflow wurden entsprechend der Anforderungen entwickelt, die zusammen mit Fachexperten definiert wurden. Des Weiteren wurden die Anwendungen in verschiedenen Entwicklungsstadien durch Nutzer getestet und deren Feedback in die Entwicklung einbezogen. Die Ergebnisse der Fallstudien wurden von den Wissenschaftlern benutzt, um ihre Daten zu analysieren, sowie diese zu präsentieren und in der Lehre einzusetzen. Da der vorgeschlagene Workflow allgemein anwendbare Konzepte beinhaltet, kann dieser auch für die Analyse wissenschaftlicher Daten anderer Disziplinen verwendet werden.

Im Rahmen des DFG-Graduiertenkollegs „CrossWorlds“ (http://www.crossworlds.info) wird im Teilbereich Kommunikation ein autonomer mobiler Roboter aufgebaut. Das Anwendungsszenario ist das Industriemuseum Chemnitz. Mithilfe von technischen Mitteln werden die Exponate des Industriemuseums durch die Informationen und Darstellungen der virtuellen Welt erweitert. Der Roboter CLUES (Cross worLds autonomoUs mobilE robot hoSt) tritt dabei als Mittler zwischen der realen Museumswelt und virtuellen Informationswelt auf. Er bietet den Besuchern die Möglichkeit zur Interaktion mit den bereitgestellten Inhalten und nimmt gleichzeitig als Gastgeber des Museums die Besucher wahr. Dieser erste Bericht beinhaltet die Grundidee des Projektes und die Hardwareausrüstung. Er schildert die Auswahl und Abstimmung der eingesetzten technischen Geräte. Mit Blick auf das Anwendungsszenario und die technischen Möglichkeiten werden die auftretenden Probleme und Lösungen diskutiert.

In der Architektur werden Gebäude entsprechend den Wünschen eines Kunden entworfen. Dabei entstehen neben den detaillierten Grundrissen heutzutage auch komplexe dreidimensionale Modelle. Daraus werden fotorealistische Ansichten des entworfenen Gebäudes erstellt. Diese helfen den Personen ohne Domänenwissen, wie beispielsweise den Kunden oder der Öffentlichkeit, einen besseren Eindruck vom Entwurf zu bekommen und fördern das Verständnis räumlicher Abhängigkeiten. Auch immersive Präsentationen in den Bereichen Augmented und Virtual Reality hielten in der Architektur Einzug. Zu Beginn dieser Arbeit werden zunächst verwandte Forschungen aus den Bereichen Architektur, Visualisierung und Interaktion analysiert. Dabei gewonnene Erkenntnisse fließen in die Entwicklung von Konzepten für eine Anwendung ein, welche auf die Kombination einer AR-Brille mit einem berührungsempfindlichen Display setzt. Ausgewählte Konzepte werden in einer prototypischen Anwendung umgesetzt. Diese Implementierung dient der Bewertung von kopfgebundener Augmented Reality in Kombination mit einem zusätzlichen Display für die Präsentation von architektonischen Entwürfen.:1 Einleitung 1.1 Ziel 1.2 Struktur dieser Arbeit 2 Verwandte Forschung 2.1 Architektur 2.2 Visualisierung in VR und AR 2.2.1 Virtual Reality 2.2.2 Augmented Reality 2.3 Interaktion mit dreidimensionalen Inhalten 2.4 Sonstige verwandte Forschung 2.5 Zusammenfassung 3 Konzepte 3.1 Modell-Präsentation 3.2 Modell-Interaktion 3.3 Modell-Manipulation 3.3.1 Materialien 3.3.2 Inneneinrichtung 3.4 Innenansicht 3.5 Mehrbenutzer-Betrieb 3.6 Alternative Darstellungsarten 3.7 Alternative Interaktionsmöglichkeiten 3.8 Zusammenfassung 4 Umsetzung 4.1 Hardware 4.2 Importe 4.3 Umgesetzte Konzepte 4.4 Prototyp 4.5 Performanz 4.6 Zusammenfassung 5 Evaluation und Ausblick 5.1 Evaluation 5.2 Ausblick 5.3 Zusammenfassung Literatur / Architects create buildings based on client requests. Nowadays they not only design detailed floor plans but also very complex three-dimensional CAD-models. Photorealistic views of the building are computed from these models. They can help persons without special knowledge to understand the spatial relations of the draft. In the last years immersive presentations in Augmented and Virtual Reality came up in architecture. At the beginning of this work related research in the fields of architecture, visualization and interaction will by examined. Thereby gained knowledge will be transfered into the development of concepts for a new application which combines an AR Head Mounted Display with a multi-touch capable display. A chosen subset of concepts will be implemented in a prototyp. This implementation is then used to evaluate the combination of AR with an additional display for the presentation of architectural drafts.:1 Einleitung 1.1 Ziel 1.2 Struktur dieser Arbeit 2 Verwandte Forschung 2.1 Architektur 2.2 Visualisierung in VR und AR 2.2.1 Virtual Reality 2.2.2 Augmented Reality 2.3 Interaktion mit dreidimensionalen Inhalten 2.4 Sonstige verwandte Forschung 2.5 Zusammenfassung 3 Konzepte 3.1 Modell-Präsentation 3.2 Modell-Interaktion 3.3 Modell-Manipulation 3.3.1 Materialien 3.3.2 Inneneinrichtung 3.4 Innenansicht 3.5 Mehrbenutzer-Betrieb 3.6 Alternative Darstellungsarten 3.7 Alternative Interaktionsmöglichkeiten 3.8 Zusammenfassung 4 Umsetzung 4.1 Hardware 4.2 Importe 4.3 Umgesetzte Konzepte 4.4 Prototyp 4.5 Performanz 4.6 Zusammenfassung 5 Evaluation und Ausblick 5.1 Evaluation 5.2 Ausblick 5.3 Zusammenfassung Literatur