Im Verbundprojekt REHALITY („Closed-loop Softwaresystem zur Neurorehabilitation nach Schlaganfall durch personalisiertes EEG/EMG-Hirnzustand-gesteuertes Virtual Reality-Therapieparadigma“) hat VTplus sein Teilvorhaben zur Erarbeitung eines Neurorehabilitations-System-Demonstrators mit virtueller Realität und EEG-Ansteuerung erfolgreich abgeschlossen.

Im Ergebnis entstand ein softwarebasierter Demonstrator, der immersive VR-Übungen mit EEG-/EMG-basiertem Closed-Loop-Feedback, Neurofeedback-Komponenten und therapierelevanten Interaktionsmechanismen verbindet.

Das Projekt erschließt für VTplus ein relevantes Entwicklungsfeld in der digitalen Neurorehabilitation. Gleichzeitig zeigt REHALITY, wie sich wiederverwendbare Plattformbausteine aus virtueller Realität, Biosignalverarbeitung und therapeutischer Steuerung auf zusätzliche medizinische Anwendungsfelder übertragen lassen.

Hintergrund: Warum virtuelle Realität in der Neurorehabilitation?

Jährlich erleiden in Deutschland rund 270.000 Menschen einen Schlaganfall und weltweit wird von ca. 12,2 Mio. Fällen ausgegangen. Betroffene sind auf langwierige, möglichst frühzeitig verfügbare neurologische Rehabilitationsmaßnahmen angewiesen. Trotz erheblichem Ressourceneinsatz sind die Möglichkeiten für individualisierte Therapie häufig begrenzt.

REHALITY setzte deshalb auf eine digitale Therapie mit VR-Umgebungen und motivierenden Interaktionselementen, um zusätzliche, individualisierbare Übungen zu ermöglichen. Ein wesentlicher Gedanke des Projekts war dabei, die Versorgungslücke zwischen stationärer Akutbehandlung, Rehabilitation und einer perspektivischen Anwendung zuhause zu verkleinern.

Ziel des VTplus-Teilvorhabens

Ziel von VTplus war die Umsetzung eines Demonstrators, der Rehabilitationsübungen mit Virtueller Realität mit einer auf Hirn- und Muskelsignalen basierten zeitlichen Ansteuerung therapierelevanter Übungsschritte kombiniert.

Die Therapie soll damit auf die Bedürfnisse der einzelnen Betroffenen abgestimmt werden und gleichzeitig ein motivierendes, immersives Bewegungserleben ermöglichen. Therapeutische Übungen sollten – je nach Schweregrad der Einschränkung – selbstständig und unabhängig durchgeführt werden können, sodass Patientinnen und Patienten aktiv zum eigenen Rehabilitationserfolg beitragen können.

Vorgehen: Systemkonzeption, Closed-Loop-Architektur und Integration

VTplus entwickelte in enger Abstimmung mit dem Universitätsklinikum Tübingen und dem Institut für Games der Hochschule der Medien Stuttgart das Systemkonzept sowie die Software- und Systemarchitektur. Dazu gehörten die Definition von Systemfunktionen, Komponenten, Kommunikationsstrukturen und Schnittstellen sowie die Festlegung der relevanten Sensortechnik.

Zunächst wurde die Fokussierung auf eingeschränkte Bereiche des Oberkörpers, insbesondere Arme und Hände, beschlossen. Ergebnis dieser Phase war die Spezifikation eines vollintegrierten VR-Systems mit Closed-Loop-Hardware-Schnittstelle.

Im weiteren Projektverlauf wurden VR-Inhalte, Biosignalverarbeitung, Neurofeedback-Komponenten und therapeutische Steuerungsmodule in einer gemeinsamen Architektur zusammengeführt. Die Biosignalverarbeitung wurde um eine Neurofeedback-Komponente erweitert, ergänzt durch Schnittstellen zur Anbindung externer Sensorik und Datenströme.

Ergebnis: Demonstrator für individualisierte VR-Rehabilitationsübungen

Als Projektergebnis entstand ein Neurorehabilitations-Demonstrator mit virtueller Realität und EEG-/EMG-basierter Ansteuerung. Der Demonstrator verbindet immersive virtuelle Umgebungen mit einem Closed-Loop-Ansatz, bei dem physiologische Signale für die zeitliche Steuerung therapierelevanter Schritte genutzt werden. Damit wurde die Grundlage für individualisierte digitale Rehabilitationsübungen geschaffen, die über klassische, rein manuell angeleitete Trainingsformen hinausgehen.

Ein zentrales therapeutisches Prinzip von REHALITY besteht darin, auch stark eingeschränkten Personen ein simuliertes Bewegungserleben zu ermöglichen. Durch den Einsatz hoch immersiver virtueller Umgebungen können Patientinnen und Patienten einen Bewegungserfolg wahrnehmen, auch wenn die reale Bewegung nur eingeschränkt möglich ist.

Virtuelle Umgebungen, Avatar und Interaktion

Für REHALITY wurden spezifische VR-Umgebungen und Avatar-Funktionen ausgearbeitet. Dazu gehörten unter anderem virtuelle Trainingssituationen, Kalibrierungs- und Interaktionsbereiche sowie die Ausgestaltung von Avatar-Funktionen für die Veranschaulichung und Rückmeldung von Bewegungen.

Die Umsetzung zielte darauf, therapeutisch relevante Bewegungen, Interaktionsschritte und Feedbackprozesse in einer immersiven und kontrollierbaren Umgebung abzubilden. Ergänzend wurden einzelne Systemkomponenten wie Eye-Tracking-Integration, grafische Benutzeroberflächen sowie App-basierte Übungs- und Therapiesteuerung getestet.

Zusammenarbeit im Forschungsverbund

REHALITY bündelte Expertise aus klinischer Hirnforschung und Neurologie (Universitätsklinikum Tübingen), Interaktiven Medien, Serious Games und Virtual Reality (Hochschule der Medien Stuttgart / Institut für Games) sowie der Anwendung Virtueller Realität für Forschung und Therapie (VTplus GmbH).

VTplus brachte evaluierte VR-Szenarien, virtuelle Charaktere und die Erfahrung ein, virtuelle Umgebungen um Biosignal-Schnittstellen und motivierende Interaktionselemente zu erweitern.

Anschlussfähigkeit

Aus technologischer Sicht ist REHALITY vor allem als entwickelter Demonstrator und dokumentierter Entwicklungspfad relevant. Das Projekt zeigt, wie die VTplus-Technologieplattform um Bausteine für Biosignalverarbeitung und adaptive therapeutische Steuerung erweitert werden kann.

REHALITY belegt damit auch die Anschlussfähigkeit der VTplus-VR-Plattform für weitere medizinische Einsatzfelder, insbesondere in der Neurologie und Rehabilitation.

Projekt: REHALITY – Closed-loop Softwaresystem zur Neurorehabilitation nach Schlaganfall durch personalisiertes EEG/EMG-Hirnzustand-gesteuertes Virtual Reality-Therapieparadigma
Teilvorhaben VTplus: Erarbeitung eines Neurorehabilitations-System-Demonstrators mit virtueller Realität und EEG-Ansteuerung
Förderkennzeichen: 13GW0213D
Laufzeit: 01.04.2019 – 31.12.2022
Veröffentlichungsdatum des Schlussberichts: 30.06.2023