Projekt "OMNICONNECT": Lokalisierung und Gestenerkennung pflegebedürftiger Menschen
Die lückenlose 360°-Detektion des Raums wird durch vier Radarmodule erreicht. Die Erkennung etwa von Stürzen geschieht unter Nutzung von Algorithmen der künstlichen Intelligenz. Das Radarsystem ist in der Lage, mit einer Winkelauflösung von 12° mehr als 30 Personen in einem Raum von bis zu 150 m² zu detektieren. Die Lokalisierung greift auf ein eigens für diesen Zweck entwickeltes passives Transpondersystem zu.
In dem vom BMBF finanzierten Projekt OMNICONNECT haben Forschende vom Fraunhofer-Institut für Zuverlässigkeit und Mikrointegration IZM zusammen mit Projektpartner:innen aus Berlin und Oldenburg ein miniaturisiertes Radarsystem entwickelt, das Notfall- und Assistenzsituationen detektiert und zugleich die Privatsphäre der Bewohner:innen wahrt. Denn anders als etwa bei Kameras entstehen lediglich Bewegungsmuster und keine Bilder. Das Radarsystem ist in eine Deckenleuchte integriert und für den Pflegebedürftige kaum wahrnehmbar. Dies verringert den Installationsaufwand und sorgt für die notwendige Akzeptanz.
Das Gesamtsystem kombiniert die KI-gestützten Radarmodule mit passiven Transpondern, die sich an verschiedenen Gegenständen im Raum befinden. Dadurch können erstmals Bewegung und Position mit nur einem Radarsystem erkannt werden. Die passiven Transponder zur Lokalisierung wurden als frequenzabhängige Radarziele entworfen, die bei einer bestimmten Zielfrequenz resonieren. Sie wirken damit ähnlich einem Leuchtfeuer. Jeder Transponder wird anhand seiner Resonanzfrequenz identifiziert. Für die genaue Lokalisierung wird seine Antwortzeit interpretiert.Die digitale Auswertung der Daten erfolgt in einer vor Ort programmierbaren Logik-Anordnung, dem so genannten FPGA, mit integriertem Prozessor. Der FPGA übergibt die Zieldaten für die Bewegungserkennung und -verfolgung direkt an eine KI-basierte Bewegungs- und Tätigkeitserkennung des Informatikforschungsinstituts OFFIS der Universität Oldenburg. Die Anwendung und die Bestimmung konkreter Objekte wiederum ist über eine App-Oberfläche der HFC Human-Factors-Consult GmbH möglich.
Der vollständig am Fraunhofer IZM gefertigte Demonstrator erreichte in den abschließenden Tests in einem Radius von bis zu zehn Metern eine zuverlässige Detektion von Positionsdaten auf fünf Zentimeter genau. Aktuell wird der Demonstrator in verschiedenen Nutzungsszenarien der Projektpartner:innen eingesetzt. Die ermittelten Positionsdaten ermöglichen Rückschlüsse auf typische Verhaltensweisen oder Bewegungsabläufe von Personen. Ab einer gewissen Datengrundlage können so nachgelagerte Assistenzanwendungen und die erfolgreiche Erkennung bestimmter Fallszenarien abgeleitet werden. Anhand der Position einer Person wird dann evaluiert, ob es der betroffenen Person gut geht oder nicht und welche Maßnahmen seitens einer Pflegeeinrichtung zu ergreifen sind.
Das vom Bundesministerium für Bildung und Forschung (BMBF) unter dem FKZ 16SV8310 geförderte Projekt OMNICONNECT lief vom 01. November 2019 bis zum 31. Dezember 2022. Quelle: Fraunhofer IZM