Biomedizin: Digitaler OP - Digital Scrubs

Projekt

Interpersonelles und multimodales Aufmerksamkeitsassistenzsystem zur kontextsensitiven, neuroergonomischen Mensch-Maschine-Interaktion in vernetzten Operationssälen

Hintergrund

Vernetzte OP-Säle, in denen Künstliche Intelligenz zum Einsatz kommt, werden in Zukunft immer mehr Informationen zur Verfügung stellen können. Damit OP-Teams diese Flut von Informationen aber gewinnbringend nutzen können, müssen sie stets auf eine begrenzte Ressource zurückgreifen, das ist ihre Aufmerksamkeit.

Forschung

Das Konsortium des Projekts DIGITAL SCRUBS erforscht, entwickelt und evaluiert daher erstmals ein Aufmerksamkeitsassistenzsystem zur neuroergonomischen Mensch-Technik-Interaktion in vernetzten OP-Sälen. Eine KI-gestützte Aufmerksamkeitsassistenz mit generischer Schnittstelle zur OP-Technik soll die kognitive Last sowie Ermüdung von OP-Teams reduzieren. So soll sie die Qualität medizinischer Eingriffe nachweisbar verbessern. Die interpersonelle KI-Assistenz stellt Informationen insbesondere durch ein Augmented Reality (AR)-System für die Sinne Sehen, Hören und Fühlen dar. Diese Informationen sind angepasst an die auszuführende Tätigkeit und Aufnahmefähigkeit des OP-Teams. Hierbei kommunizieren die Forschenden transparent mit der Zielgruppe des Systems und binden sie frühzeitig in die Entwicklung mit ein.

Aufgabe

Die Aufgaben des ZeMA konzentrieren sich dabei auf die Erstellung einer Mikroservice-basierten Repräsentation des Digitalen OP-Saals. Dazu wird ein modularer Aufbau des Systems für einen flexiblen, an unterschiedliche OP-Szenarien anpassbaren Einsatz entwickelt. Zum Einsatz kommen Microservice-Architekturen und mehrschichtige Kommunikations-Technologien zur Vernetzung von Geräten und Assistenzsystemen.
Dabei spielt der Bereich Mensch-Maschine-/Mensch-Roboter-Interaktion im OP eine wichtige Rolle, sowie die Integration von IoT-Geräten und Sensorik im Demonstratoraufbau zum sicheren und echtzeitfähigen Umgang mit heterogenen Daten im dezentralisierten vernetzten OP.
Fotogalerie - Digitaler OP - Digital Scrubs