XR in Surgery. Spatial and embodied computing in digital surgery: Technology, Application, Design

Abstract

Die Arbeit untersucht die Anwendungsfelder, Darstellungsprinzipien und Funktionsweise von extended reality in der chirurgischen Praxis. Anhand zweier Fallstudien zu mixed und virtual reality werden die Einsatzorte und Praktiken von head-mounted Displays sowie das erforderliche Anwendungswissen herausgearbeitet. An den Beispielen der Einblendung anatomischer Darstellungen ins Sichtfeld des chirurgischen Personals sowie der volumetrischen Darstellung chirurgischer Arbeitsabläufe in einer virtuellen Trainingsumgebung werden zwei konkrete Anwendungsszenarien für den Einsatz von extended reality in der chirurgischen Praxis entwickelt. Darauf aufbauend werden die Chancen und Risiken evaluiert, die sich insgesamt für chirurgische Handlungen und Entscheidungen im Bezug auf die Wahrnehmung, Interpretation und Gestaltung von Bildern der extended reality ergeben.The work investigates the technology, application and design of extended reality in surgical practice. Based on two case studies on mixed and virtual reality, it analyses use of head-mounted displays as well as the required applied knowledge. Using the examples of superimposing anatomical images onto the field of vision of surgical staff and the volumetric representation of surgical workflows in a virtual training environment, two concrete application scenarios for the use of extended reality in surgical practice are developed. Based on these scenarios, the chances and risks are evaluated, which result overall for surgical acting and decision making in terms of perception, interpretation and design of images of extended reality