Mixed Reality im Einsatz: apoQlar entwickelt mit Microsoft HoloLens 2 Lösungen für die Medizin der Zukunft

HoloLens-Einsatz in der Medizin

Ob in der Ausbildung, im OP oder beim Gespräch mit Patient*innen: Gute Medizin erfordert einen bestmöglichen Zugriff auf alle relevanten Informationen. Genau das bietet der Microsoft-Partner apoQlar GmbH. Mit seiner Technologie und Microsoft HoloLens 2 ermöglicht apoQlar den Einsatz von 3D-Hologrammen und Mixed Reality im medizinischen Alltag. 

Im Lehrbuch sah es völlig anders aus – dieser Satz mag vielen angehenden Ärzt*innen durch den Kopf gehen, wenn sie erstmals eine Operation hautnah miterleben. Für die medizinische Ausbildung liegt genau darin ein Problem. Zweidimensionale Aufnahmen und Abbildungen geben meist nur unzureichend wieder, wie beispielsweise Organe tatsächlich aussehen oder sich bestimmte Krankheitsbilder darstellen – und sorgen damit nicht nur bei Studierenden für Frust. Auch deshalb braucht es andere Darstellungsformate.

Das dachte sich auch das Team von Microsoft-Partner apoQlar, ein Vorreiter für bildgebende Verfahren in der Medizin. Mit der Software VSI HoloMedicine® und Microsoft HoloLens 2 bringt apoQlar Mixed Reality in die medizinische Behandlung und sogar in den Operationssaal. Chirurg*innen haben dadurch die Möglichkeit, in der Vor- und Nachbesprechung mit den Patient*innen und vor und nach einer OP die vorliegenden CT- und MRT-Bilder in 3D zu sehen. Von dieser Möglichkeit sollen mit VSI HoloMedicine® for Education künftig auch Medizinstudierende oder Ärzt*innen in Aus- und Weiterbildung profitieren.

Studieren in der Herzkammer

Mit VSI HoloMedicine® for Education lassen sich die Aufnahmen aus klassischen Lehrbüchern durch eine digitale Bibliothek mit realen medizinischen Bildern in 3D ersetzen. Studierende haben so die Möglichkeit, gemeinsam an medizinischen Bildobjekten zu arbeiten. Die Objekte lassen sich frei im Raum bewegen und nach Bedarf in der Größe anpassen. Auf diese Weise sind auch ungewöhnliche und besonders detailreiche Einblicke möglich, die ein völlig neues Verständnis fördern – beispielsweise dann, wenn Studierende sich selbst inmitten einer Herzkammer wiederfinden. Anatomische Strukturen lassen sich durch die Mixed-Reality-Perspektive leichter nachvollziehen.

Fachlicher remote Austausch mit anderen Ärzt*innen

Die holographischen Objekte helfen in der medizinischen Praxis auch dabei, Patient*innen die Sachverhalte leichter zu erklären. Bei der OP-Planung unterstützt VSI HoloMedicine® in Kombination mit Microsoft HoloLens 2 die Mediziner*innen ebenfalls, indem sie es Chirurg*innen durch das Einblenden der jeweiligen Aufnahmen im Sichtfeld und durch die Überlagerung mit dem Patient*innen-Körper erlaubt, die anatomischen Gegebenheiten präziser zu beurteilen.

Einsatz der HoloLens im Unterricht

Kollaborative Arbeiten sind ebenfalls möglich, bei denen sich verschiedene Mediziner*innen den digitalen Blick durch das Headset teilen und sich so remote beispielsweise bei Planungen von Eingriffen unterstützen können. Sie sind als Hologramm-Avatare dem OP-Personal sichtbar und können sich in Echtzeit miteinander verständigen. Die Ärzt*innen führen dabei gemeinsame OP-Planungen durch – auch dann, wenn sie sich auf verschiedenen Kontinenten befinden.

Streamer Box für Übertragungen in Echtzeit

Ergänzend zu den CT- und MRT-Aufnahmen, die im Vorfeld einer Operation erstellt wurden, geht apoQlar mit der Streamer Box einen Schritt weiter. Mit ihr ist es möglich, auch Live-Bilder beispielsweise aus Ultraschalluntersuchungen, Fluoroskopien, Endoskopien und anderen klassischen bildgebenden Verfahren direkt und in Echtzeit in Microsoft HoloLens 2 und damit das Blickfeld der Ärzt*innen zu übertragen. Dafür müssen lediglich die jeweiligen medizinischen Geräte im Behandlungssaal per HDMI-Kabel mit der Streamer Box verbunden werden.

Einsatz der HoloLens bei einer Operation

Die behandelnden Ärzt*innen haben so alle notwendigen Informationen live in einer Mixed-Reality-Umgebung vor Augen und können sich bei der Interpretation der Ergebnisse leichter an der tatsächlichen Anatomie der Patient*innen orientieren. Das medizinische Personal wird durch das Einblenden der Aufnahmen in den Arbeitsabläufen entlastet. Daraus resultiert eine effizientere und präzisere medizinische Behandlung, von der Patient*innen und Ärzt*innen gleichermaßen profitieren.

Die Kundengeschichte von apoQlar zeigt weitere Möglichkeiten der VSI HoloMedicine®-Technologie. Unsere Feature-Story zu apoQlar gibt es hier zum Nachlesen.

Mehr Informationen zu Microsoft HoloLens 2 finden Sie wiederum hier. Über weitere Einsatzmöglichkeiten in der Medizin und wie Chirurg*innen weltweit mit ihrer Hilfe zusammenarbeiten, können Sie sich hier informieren.


Ein Beitrag von Pina Meisel
Communications Manager Digital Qualification & Innovation

Pina Meisel als Portrait-Bild

Tags: , , ,

Weitere Infos zu diesem Thema

7. Oktober 2021
Nachgefragt bei Reto Grob, Head of augment IT by Netcetera AG

Reto Grob ist Head of augmentIT, einem Schweizer Softwareunternehmen, das sich auf die Entwicklung von Augmented- und Mixed-Reality-Anwendungen für unterschiedliche Geräte spezialisiert hat. Im Gespräch schätzt er das Potenzial von Mixed-Reality ein und erklärt, welche Vorteile der Einsatz der Microsoft HoloLens hat.

7. Oktober 2021
Wie Mixed Reality unsere Arbeitswelt bereichert

Mixed Reality bildet das gesamte Spektrum zwischen der physischen Welt, in der wir leben, bis hin zur vollständig virtuellen Realität ab. Anwender*innen erhalten dank Microsoft HoloLens einen Blick in diese gemischte Realität. Das bedeutet, dass Träger*innen digitale Inhalte – sogenannte Hologramme – in der realen Welt sehen und mit diesen über Sprache, Gesten oder Bewegungen interagieren können. Das Besondere an dieser Technologie ist das unbegrenzte Potential an Einsatzmöglichkeiten über alle Branchen hinweg.

4. August 2021
„Mixed Reality im Einsatz“ und „Nachgefragt“: Wir zeigen, wie unsere Partner mit Mixed Reality und Microsoft HoloLens 2 Innovation fördern

Microsoft HoloLens 2 ist eine faszinierende Möglichkeit, um die reale Welt mit Hilfe von Mixed Reality zu erweitern. Dabei kann die immersive Technologie in ganz verschiedenen Bereichen der Wertschöpfungskette einen Mehrwert bieten – von der Produktentwicklung über Fertigung und Wartung bis zu Marketing und Vertrieb. In unseren zwei Beitragsreihen möchten wir die Einsatzszenarien und das Potenzial von Mixed Reality näher betrachten.