Ferngesteuerte Robotik für Operationseinsätze

Welches Potenzial eröffnen 6G und KI?

Den Ärztemangel und seine Folgen für die Patientenbetreuung bekommen wir bereits zu spüren. Können mobile Operationsroboter helfen, Versorgungslücken zu minimieren? Dieser Frage gehen Forschende der RPTU und des Deutschen Forschungszentrum für Künstliche Intelligenz (DFKI) nach. Sie verbinden Ansätze aus der Robotik mit KI-Methoden unter Einsatz des künftigen Mobilfunkstandards 6G. Ihr Ziel: Eine Analyse, die Potenziale von ferngesteuerter Robotik für Operationseinsätze aufzeigt und Anforderungen an KI und Kommunikationsnetze definiert. Auf der Medizintechnikmesse Medica in Düsseldorf präsentieren sie ihre Arbeit vom 13. bis 16. November am Forschungsstand Rheinland-Pfalz (Halle 3, E80).

Robotik bei Operationen einzusetzen, ist keine grundlegend neue Idee. Innovativ ist vielmehr der Ansatz, derartige Systeme aus der Ferne bzw. mobil bedienbar zu machen. Projektleiter Marc Ruffing, der am Lehrstuhl für Funkkommunikation und Navigation an der RPTU und im Forschungsbereich „Intelligente Netze“ am DFKI forscht, umreißt die damit verbundenen Herausforderungen: „Bisher muss die operierende Person in der Nähe des Operationssaals anwesend sein, da eine mobile Nutzung von ferngesteuerter Robotik aufgrund der Größe und Infrastruktur solcher Systeme noch nicht praktikabel ist. Zudem ist die Steuerung der Systeme nicht intuitiv. Die operierende Person arbeitet mit Joysticks über einem abgeschirmten Bildschirm. Es fehlt sowohl die natürliche Bewegung als auch das haptische Feedback. Im Gegensatz zum Menschen sind Roboter nicht feinfühlig genug.“

Hoher Anspruch an Latenzzeiten

Diese Hürden zu überwinden, haben sich Ruffing und sein Team zur Forschungsaufgabe gemacht. Sie nutzen hierfür einen Demonstrator, der aus zwei kollaborativen Roboterarmen besteht und somit ein klassisches Setup darstellt. Ein Roboterarm lässt sich durch die Führung des anderen von Menschenhand steuern. Das System ermöglicht ein virtuelles haptisches Feedback in Form von Forcefeedback, das vom gesteuerten Roboterarm an den steuernden Roboterarm übertragen wird. Dadurch kann die steuernde Person spüren, was sie gerade tut. Die Kommunikation zwischen den beiden Robotern erfolgt über ein Netzwerk. Dabei sind keine großen Datenpakete unterwegs – der Knackpunkt ist vielmehr ein anderer: „Gerade bei derartig hochsensiblen Tätigkeiten wie ferngesteuerten Operationen gelten besonders hohe Anforderungen an Latenzzeiten. Steuerbefehle der operierenden Person müssen ohne jegliche Verzögerung am Behandlungsort ankommen“, erklärt Teamleiter Christoph Lipps. „Deswegen schreiben wir anhand des Testszenarios fest, was der künftige Mobilfunkstandard 6G in punkto Echtzeit-Steuerung erfüllen muss.“

Steuerung natürlicher machen

Parallel forscht das Team daran, wie sich mithilfe von intelligenten Technologien die Bedienung des Systems verbessern lässt. Sie erproben unter anderem ein Nahinfrarot-basiertes Motion-Capture-System. Damit lassen sich Objekte wie beispielsweise eine Hand und deren Bewegungen millimetergenau im Raum erfassen. Eine unnatürliche Steuerung per Joystick wäre somit nicht mehr nötig.

Ebenso ist es möglich, eine Mensch-Maschine-Schnittstelle (Brain-Computer-Interface, BCI) ins System einzubinden. „Indem wir mittels Elektroenzephalografie oder Nahinfrarot-Spektroskopie die Hirnströme einer Person messen, können wir Daten gewinnen, die über den Gemütszustand Auskunft geben“, sagt Matthias Rüb, wissenschaftlicher Mitarbeiter im Team. „Für die Auswertung sorgt ein künstliches neuronales Netz, eine Anwendung aus dem Bereich des Maschinellen Lernens. Es scannt die per BCI gemessenen Daten und ordnet diesen Gemütszustände zu. Nimmt die Aufmerksamkeit des Arztes ab oder sein Stresslevel zu, könnte beispielsweise eine Warnmeldung erfolgen.“

Beitrag zum „Open6GHub“

Mit den Erkenntnissen aus dem Projekt wird das Team das Pflichtenheft für die Echtzeit-Fernsteuerung von Operationsrobotern befüllen. „Wir entwickeln keine Medizinprodukte“, fasst Ruffing zusammen. „Vielmehr geht es uns darum, Anforderungen an 6G und an KI zu definieren, um die Technik in die Anwendung zu bringen – etwa in Form eines mobilen Operationssaals oder eingebaut in einen Krankenwagen.“

Interessierten vermitteln die Forschenden im Rahmen der Medica den Stand ihrer Forschungsarbeit anhand des Demonstrators.

Angesiedelt ist das Projekt unter dem Dach des „Open6GHub“, das von Professor Schotten, Leiter des Lehrstuhls Funkkommunikation und Navigation an der RPTU und Leiter des Forschungsbereichs Intelligente Netze am DFKI koordiniert wird. Neben der RPTU und dem DFKI sind weitere Hochschulen und Forschungsinstitute beteiligt. Im Forschungsverbund wollen die Partner dazu beitragen, eine 6G-Gesamtarchitektur zu entwickeln und ebenso Ende-zu-Ende-Lösungen unter anderem in folgenden Bereichen auf den Weg zu bringen: Erweiterte Netzwerktopologien mit hochagiler sogenannter organischer Vernetzung, Security- und Resilienz, Thz- und photonische Übertragungsverfahren, Sensorfunktionalitäten in den Netzen und deren intelligente Nutzung und Weiterverarbeitung und anwendungsspezifische Radioprotokolle.

Auf dem Weg dorthin sind die Forschenden offen für Dialog und Kooperationen: „Wir suchen einen frühzeitigen und interaktiven Dialog mit der Öffentlichkeit und sind ebenso bereit für Kooperationen mit der Industrie und Anwendern“, so Schotten. „Hierfür werden wir OpenLabs und offene Experimentalfelder installieren. Nicht zuletzt wollen wir durch die Einbeziehung von KMUs und Start-Ups und deren Ergebnissen ein offenes Innovationssystem fördern.“

Der Auftritt der Forscherinnen und Forscher der RPTU bei der Medica wird von Klaus Dosch vom Referat für Technologie, Innovation und Nachhaltigkeit organisiert. Er ist Ansprechpartner für Unternehmen und vermittelt unter anderem Kontakte zur Wissenschaft.
Kontakt: Klaus Dosch, E-Mail: klaus.dosch@rptu.de, Tel.: 0631 205-3001

Fragen beantwortet:
Marc Ruffing
Lehrstuhl für Funkkommunikation und Navigation
Tel: +49 (0)631 205 75 1826
Mail: marc.ruffing@rptu.de

Über das DFKI
Das Deutsche Forschungszentrum für Künstliche Intelligenz GmbH (DFKI) wurde 1988 als gemeinnützige Public-Private-Partnership (PPP) gegründet. Es verbindet wissenschaftliche Spitzenleistung und wirtschaftsnahe Wertschöpfung mit gesellschaftlicher Wertschätzung. So forscht das DFKI seit über 30 Jahren an KI für den Menschen und orientiert sich an gesellschaftlicher Relevanz und wissenschaftlicher Exzellenz in den entscheidenden zukunftsorientierten Forschungs- und Anwendungsgebieten der Künstlichen Intelligenz. In der internationalen Wissenschaftswelt zählt es zu den wichtigsten „Centers of Excellence“. Das DFKI unterhält Standorte in Kaiserslautern, Saarbrücken, Bremen und Niedersachsen, Labore in Berlin und Darmstadt sowie Außenstellen in Lübeck und Trier. Aktuell forschen dort ca. 1.560 Mitarbeitende aus über 76 Nationen an innovativen Software-Lösungen. Das Finanzvolumen lag 2022 bei 82,6 Millionen Euro.

http://www.rptu.de