Forschungsprojekt Daior Verteilte Künstliche Intelligenz für den Operationssaal

Chirurgen im experimentellen Hybrid-OP des Fraunhofer IPA in Mannheim

Bild: Fraunhofer IPA
02.10.2023

Im Forschungsprojekt Daior arbeiten das Fraunhofer IPA zusammen mit Partnern daran, den Operationssaal der Zukunft mithilfe von Künstlicher Intelligenz (KI) und roboterassistierter Telechirurgie zu realisieren. Dabei sollen chirurgische Daten aus multimodalen Quellen mit KI-Methoden kontinuierlich analysiert werden, um Operationen in Echtzeit zu unterstützen.

Daten zu nutzen, um medizinisches Personal bei der Behandlung oder bei der Operation eines Patienten zu unterstützen, ist das Ziel des Projekts Daior. Das Akronym ist die Abkürzung für „Distributed Artificial Intelligence for the Operating Room“: Durch die Analyse von Daten, Optimierung von Workflows und die Nutzung von Erfahrungswerten aus früheren Operationen sollen Algorithmen trainiert werden.

Auf diese Weise kann KI dem klinischen Personal in Echtzeit und standortunabhängig helfen, die Versorgung der Patienten zu verbessern. In dem interdisziplinären Konsortium mit Fachkompetenzen aus Medizin und Technik arbeiten das Fraunhofer-Institut für Produktionstechnik und Automatisierung IPA zusammen mit dem Institute of Image-Guided Surgery (IHU) in Straßburg und dem Bosch Digital Innovation Hub (KTBW) am Bosch Health Campus (Stuttgart). Das Projekt wird durch das Bundesministerium für Bildung und Forschung gefördert.

Lokales Wissen als ortsübergreifende Trainingsdaten für KI-Modell

Die Nutzung medizinischer Daten ist meist auf einen Standort begrenzt. Behandlungen sind standortabhängig, da es im Gesundheitswesen kaum Möglichkeiten zum Datenaustausch gibt. Eine weitere Herausforderung sind die verschiedenen Formate der Daten wie Bilder, Texte und Videos. Diese erschweren es, Zusammenhänge zu erkennen und für die Behandlung von Patienten zu nutzen.

Damit das nicht so bleibt, werden im Projekt Daior KI-Modelle mit verteilten Lernansätzen mit dem lokal verfügbaren Wissen trainiert. „Das Wissen kann so anderweitig verwendet werden, ohne dass sensible Daten den jeweiligen Standort verlassen“, sagt Johannes Horsch, Leiter Medizintechnische Assistenzsysteme am Fraunhofer IPA.

Horsch: „So werde verteiltes Wissen gebündelt und ortsunabhängig verfügbar gemacht. „Durch die Methoden des föderalen Lernens können in Daior Trainingsdaten aus verschiedenen Standorten, sogar über Ländergrenzen hinweg genutzt werden, während die Daten an den Standorten verbleiben und so gleichzeitig der Schutz für die Daten von Patienten sichergestellt ist.“

Standortunabhängige Operationen mit roboterassistierter Telechirurgie

Die Zusammenarbeit zwischen Fraunhofer IPA und des IHU Straßburg ist durch das seit dem Jahr 2022 laufende Gemeinschaftsprojekt „5G-OR“ bereits erfolgreich etabliert. Die dort implementierte 5G-Infrastruktur wird genutzt, um Operationen aus der Ferne durchzuführen. Für die ortsübergreifende roboterassistierte Telechirurgie wird in Daior ein KI-Modell entwickelt, das Verzögerungen in der Datenkommunikation auf beiden Seiten kompensieren kann, indem es die darauffolgenden Schritte voraussagt.

„Das funktioniert ähnlich wie unser Gehirn“, erklärt Horsch. „Unser Gehirn berechnet ständig unmittelbar mögliche Szenarien. Genauso agiert auch die KI.“ Diese werde kontinuierlich in Echtzeit mit Daten versorgt und sei daher in der Lage, die nächsten Schritte vorherzusagen und Operateuren zu assistieren.

Mit dieser roboterassistierten Telechirurgie könnten schon bald Operationen standortunabhängig über das Internet durchgeführt werden. Damit wird es möglich, freie OP-Kapazitäten flexibel zu nutzen: Operationen können schneller durchgeführt und Patienten besser medizinisch versorgt werden. „Das ist ein Meilenstein in der Versorgung von Patienten, besonders in der Notfallmedizin, bei der es oft auf Sekunden ankommt, beispielsweise bei einem Herzinfarkt oder Schlaganfall“, so Horsch. Außerdem kommt den Patienten zugute, dass das klinische Personal mehr Zeit für die Behandlung zur Verfügung hat.

Langjährige deutsch-französische Kooperation

Neben dem Gemeinschaftsprojekt „5G-OR“ ist Daior bereits die zweite langjährige Kooperation zwischen Fraunhofer IPA und IHU Straßburg. Daior vertieft die deutsch-französische Zusammenarbeit und stärkt den internationalen Technologie- und Wissenstransfer. Das multidisziplinäre IHU Straßburg forscht an innovativen bildgesteuerten Therapien für die Patientenversorgung.

Es entwickelt minimal-invasive Präzisionseingriffe, die durch Technologien der virtuellen Realität, Robotik und Künstlichen Intelligenz optimiert werden. Neuartige von der IHU angelegte Patientenpfade, die die „Reise“ des Patienten (engl. Patient Journey) durch das Krankenhaus von der Aufnahme bis zur Entlassung beschreibt, führen zu einer beschleunigten Diagnose, ambulanten statt stationären Operationen und einer verbesserten postoperativen Rehabilitation.

Klinische Gesundheitstechnologien und Robotik gehören zu den strategischen Themenbereichen des Fraunhofer IPA. Das Institut sieht in der KI die Möglichkeit, insbesondere Chirurgen durch intelligente Assistenzsysteme stärker zu unterstützen und Teilschritte der Operationen zu automatisieren. Dabei wurde die Telechirurgie als wichtiger Meilenstein identifiziert, da diese bereits die zur Automatisierung notwendige Infrastruktur umfasst und es erlaubt, große Datenmengen der Interventionen zu sammeln.

Bildergalerie

  • Experimenteller Hybrid-OP des Fraunhofer IPA in Mannheim.

    Experimenteller Hybrid-OP des Fraunhofer IPA in Mannheim.

    Bild: Fraunhofer IPA

Verwandte Artikel