Warum Chirurgen Apple Vision Pro im Operationssaal einsetzen

• Vor 24 Jahren führte der Chirurg Santiago Horgan die weltweit erste robotergestützte Magenbypass-Operation durch. Das war ein bedeutender Durchbruch in der Medizin
• Heute arbeitet Horgan mit einem neuen Werkzeug, das im Operationssaal noch innovativer sein könnte: Apple Vision Pro
• Im vergangenen Monat haben Horgan und andere Chirurgen an der UCSD mehr als 20 minimalinvasive Eingriffe mit Apples Mixed-Reality-Headset durchgeführt
• Apple brachte das Headset im Februar auf den Massenmarkt, kommerziell war es jedoch größtenteils ein Misserfolg. In einigen Branchen wie Architektur und Medizin wird aber getestet, wie es bestimmte Anforderungen erfüllen kann
• Horgan sagt, das Tragen des Headsets während einer Operation könne das Verletzungsrisiko senken und zugleich die Leistungsfähigkeit erhöhen. Vor allem für Krankenhäuser, die sich spezialisierte Geräte nicht leisten können, könnte das enorme Auswirkungen haben. „Das ist eine Revolution auf dem Niveau des früheren Durchbruchs im Jahr 2000, wird aber wegen der Zugänglichkeit mehr Leben beeinflussen“, sagt er

Die Schwierigkeit der laparoskopischen Chirurgie

• Bei laparoskopischen Eingriffen führen Ärzte eine kleine Kamera durch einen kleinen Schnitt in den Körper des Patienten ein und projizieren deren Sicht auf einen Monitor
• Ärzte müssen den Patienten operieren, während sie auf einen Bildschirm nach oben schauen. Das ist eine anspruchsvolle Aufgabe, die eine gute Hand-Auge-Koordination erfordert, während in einer Umgebung unter Druck weitere visuelle Variablen verarbeitet werden müssen
• Horgan sagt: „Normalerweise drehe ich mich um, unterbreche die Operation, um einen CT-Scan anzuschauen, sehe mit dem Endoskop nach, was passiert ist, und schaue auf den Monitor, um die Herzfrequenz zu prüfen“
• Laut einer Studie aus dem Jahr 2022 klagen die meisten Chirurgen bei minimalinvasiven Eingriffen über Unwohlsein
• Etwa ein Fünftel der befragten Chirurgen sagte, die Schmerzen träten so häufig auf und seien so belastend, dass sie einen vorzeitigen Ruhestand in Erwägung zögen
• Ein hochwertiges Mixed-Reality-Headset könnte es Chirurgen daher ermöglichen, den Operationsbereich des Patienten im Blick zu behalten und gleichzeitig virtuelle Anzeigen für die laparoskopische Kamera und die Vitalzeichen des Patienten zu sehen, ohne den Blick nach oben richten zu müssen

Die Stärken von Apple Vision Pro

• Horgan hatte zuvor andere Headsets wie Google Glass und Microsoft HoloLens ausprobiert, stellte aber fest, dass deren Auflösung nicht hoch genug war
• Apple Vision Pro testete er jedoch noch vor der Markteinführung und war sofort beeindruckt
• Horgan beantragte beim Institutional Review Board der University of California die Genehmigung für den Einsatz des Geräts, und das Gremium erteilte die Freigabe
• Im September leitete er erstmals eine Operation an einer Hiatushernie mit Apples Headset. „Wir waren alle verblüfft. Es war viel besser, als wir erwartet hatten“, sagt Horgan

Einsatz von Apple Vision Pro an der UCSD

• In den vergangenen Wochen hat die Abteilung für minimalinvasive Chirurgie der UCSD mit Apple Vision Pro mehr als 20 Operationen durchgeführt, darunter Eingriffe bei Refluxösophagitis und Adipositaschirurgie
• Ärzte, Assistenten und Pflegekräfte trugen das Headset während des Eingriffs
• Laut Horgan hat bislang kein Patient dieses Experiment abgelehnt
• Christopher Longhurst, Chief Clinical and Innovation Officer von UCSD Health, sagt, das Preisschild der Vision Pro möge für normale Verbraucher enorm wirken, sei aber im Vergleich zu den meisten medizinischen Geräten günstig
• „Ein Monitor im Operationssaal kostet wahrscheinlich etwa 20.000 bis 30.000 Dollar. Da sind 3.500 Dollar für ein Headset im medizinischen Umfeld praktisch Kleingeld im Budget“, sagt er
• Diese Preisgestaltung könnte besonders für kleinere regionale Krankenhäuser attraktiv sein, denen das Budget für teure Geräte fehlt (die FDA hat das Gerät bislang noch nicht für den breiten medizinischen Einsatz zugelassen)
• Longhurst sagt außerdem, dass Apple Vision Pro derzeit auch auf seine Fähigkeit getestet wird, 3D-Radiologiebilder darzustellen
• Er erwartet, dass das UCSD-Team in den kommenden Jahren mehrere Fachartikel veröffentlichen wird, die die Wirksamkeit des Headsets in verschiedenen medizinischen Anwendungen belegen
• „Wir glauben, dass es in den nächsten Jahren weltweit zum Standard in Operationssälen werden wird“, sagt Longhurst

Andere AR-Chirurgiesysteme

• Apple Vision Pro ist nicht das einzige Gerät, das um die Aufmerksamkeit von Chirurgen konkurriert
• Es gibt bereits andere chirurgische Visualisierungssysteme auf dem Markt, die ähnliche Vorteile versprechen
• Das Startup Augmedics hat ein AR-Navigationssystem für Wirbelsäulenchirurgen entwickelt, das 3D-Bilder des CT-Scans eines Patienten über dessen Körper legt. Theoretisch ermöglicht das Operationen, als hätte der Arzt Röntgenblick
• Ein weiteres Unternehmen, Vuzix, bietet ein deutlich leichteres Headset als Vision Pro an, mit dem sich die Perspektive eines irgendwo auf der Welt operierenden Chirurgen ansehen und kommentieren lässt

Weitere Einsatzfälle für AR-Headsets

• Ahmed Ghazi, Leiter für minimalinvasive und robotische Chirurgie an der Johns Hopkins University, verwendet Vuzix-Headsets bereits für Fernschulungen, sodass Assistenzärzte die Perspektive ihres Supervisors sehen können
• Kürzlich nutzte er Microsoft HoloLens, um einer Patientin eine „Generalprobe“ ihrer Operation zu geben. Beide trugen Headsets, und er führte sie durch eine virtuelle 3D-Rekonstruktion ihres CT-Scans, während er erklärte, wie er den Tumor entfernen würde
• „Wir konnten diesen Prozess gemeinsam durchgehen. ‘Wir finden das Gefäß, das den Tumor versorgt, setzen einen Clip, präparieren hier und müssen darauf achten, das nicht zu verletzen.’“, sagt er. „Es gibt die Möglichkeit, Patienten in diese Welt mitzunehmen und ihnen ein besseres Verständnis zu vermitteln“
• Ghazi sagt, dass Ärzte mit der zunehmenden Einführung solcher Headsets in Operationssälen besonders in Bezug auf den Schutz der Privatsphäre von Patienten vorsichtig sein müssten
• „Jedes Gerät, das mit einem Netzwerk oder einem WiFi-Signal verbunden ist, kann offengelegt oder gehackt werden“, sagt er. „Wir müssen sehr sorgfältig damit umgehen, was wir tun und wie wir es tun“

Die Anpassungsfähigkeit von Apple Vision Pro

• Miguel Burch, Leiter der Allgemeinchirurgie am Cedars-Sinai Medical Center in Los Angeles, hat im Laufe der Jahre verschiedene auf den medizinischen Einsatz ausgerichtete Headsets getestet
• Er sagt, Apple Vision Pro sei wegen seiner Anpassungsfähigkeit besonders nützlich. „Wenn alles, was wir in der Augmented Reality nutzen wollen, exklusiv an ein anderes Gerät gebunden ist, hätten wir 10 Headsets und 15 verschiedene Monitore“, sagt Burch. „Aber dieses eine Gerät lässt sich mit allem nutzen, was einen Video-Feed hat“
• Burch sagt, er habe sich im Laufe seiner Karriere bei minimalinvasiven Eingriffen drei verschiedene Verletzungen zugezogen
• Nun hofft er, Apple Vision Pro am Cedars-Sinai einzuführen, und glaubt, dass die aktuellen medizinischen Funktionen des Headsets nur „die Spitze des Eisbergs“ sind
• „Es ist nicht nur eine ergonomische Lösung für das stille Problem, dass Chirurgen ihre Karriere früh beenden müssen, sondern die Fähigkeit, Bilder zu überlagern, wird auch enorm verbessern, was wir tun können“, sagt er

Meinung von GN⁺

• Der Einsatz von Apple Vision Pro im Operationssaal ist eine sehr spannende Entwicklung mit großem Potenzial. Sie kann die ergonomischen Probleme von Chirurgen angehen und es erleichtern, während einer Operation verschiedene Informationen einzusehen
• Allerdings muss auf Datenschutz- und Sicherheitsprobleme geachtet werden. Da das Risiko von Hackerangriffen oder Datenlecks besteht, sind gründliche Sicherheitsmaßnahmen erforderlich
• Außerdem müssen regulatorische Verfahren als Medizinprodukt durchlaufen werden, darunter eine Zulassung durch die FDA, und auch die Sicherheit bei langfristiger Nutzung muss überprüft werden
• Die hohe Auflösung und Anpassungsfähigkeit von Apple Vision Pro sind große Vorteile, ein vergleichsweise hohes Gewicht und der hohe Preis können aber Nachteile sein. Wenn das Gerät künftig leichter und günstiger wird, könnte es im medizinischen Bereich breiter eingesetzt werden
• Auch andere Produkte wie Vuzix und Augmedics sind beachtenswert, und ihr Einsatzpotenzial in unterschiedlichen medizinischen Umgebungen sollte untersucht werden

[budlebee]

Es gibt auch ein Unternehmen, das Apple Vision Pro in optischen Experimenten eingeführt hat. Ob sich der Preis lohnt, weiß ich nicht, aber praktisch wirkt es schon. https://m.youtube.com/watch?v=9ene_GQDBtc

[GN⁺]

Hacker-News-Kommentare

• AR-Technologie hätte im Bildungsbereich enormes Potenzial, wenn der Preis sinkt

  • Funktionen, die Erklärungen, Diagramme und Stromfluss in Echtzeit über Leiterplatten legen
  • Reparatur von Haushaltsgeräten und Heimwerken
  • Nützlich zum Erlernen von Jonglage und Fingerfertigkeit
  • Im Kunstbereich eine Methode, bei der um ein Modell in der Mitte herum skizziert wird
  • Beispiele, die auf persönlichen Hobbys beruhen

• Beim Einsatz eines Headsets im Operationssaal ist der Schutz der Privatsphäre von Patienten wichtig

  • Geräte, die mit dem Netzwerk oder WiFi verbunden sind, bergen ein Hacking-Risiko
  • Misstrauen gegenüber den Daten, die Apple sammelt
  • Würde verärgert sein, wenn das Produkt ohne Einwilligung des Patienten verwendet wird
  • Wenn VR-Headsets in der Chirurgie allgemein verbreitet werden, werden sich auch andere Unternehmen an der Technologie beteiligen

• Telepräsenz-Funktionen für chirurgische Beratung aus der Ferne wären nützlich

  • Funktionen, die den Kamera-Feed des Headsets an einen anderen Ort streamen
  • Wichtig ist eine Funktion, mit der sich Rat von entfernten Experten einholen lässt

• Die Business-Anwendungen von Microsoft HoloLens wurden eingestellt

  • Apple Vision Pro wird als Flop bewertet
  • Apple erkennt das nicht an

• Technologien wie Kinect hatten interessante Anwendungen außerhalb des Consumer-Bereichs

  • Apple ist erfolgreich darin, bestehende Produkte zu perfektionieren und zu einem globalen Phänomen zu machen
  • AVP hat einige Vorteile, reicht aber nicht aus, um breite Anziehungskraft zu gewinnen
  • Das könnte sich in der nächsten Version verbessern

• Es ist schwer zu verstehen, worin AVP anderen AR-Geräten überlegen sein soll

  • Unklar, warum Chirurgen dieses Gerät als revolutionär angesehen haben

• Es wird bezweifelt, ob Apple Vision Pro als kommerziellen Misserfolg betrachtet

• VR ist eine Technologie auf der Suche nach einem Problem

  • iPod und iPhone hatten klare Anwendungsfälle und lösten Frustrationen der Nutzer
  • Es ist ungewiss, ob VR im Massenmarkt erfolgreich sein wird