Drohne bei Personensuche
JKU/Institut für Computergrafik
JKU/Institut für Computergrafik
Wissenschaft

KI hilft bei Suche nach Vermissten

Bei Rettungseinsätzen werden vermisste oder verunglückte Personen oft mit Wärmebildkameras von Hubschraubern aus gesucht. Nun hilft Künstliche Intelligenz mit auf Drohnen montierten Infrarotkameras bei der Suche in dichten Wäldern.

Das Hauptproblem bei der Suche nach Vermissten war bisher, dass sie auch mit Wärmebildkameras in dicht bewaldeten Gebieten kaum zu finden waren. Ein von Forschern der Linzer Kepler-Universität entwickeltes Verfahren soll derartige Suchaktionen aber deutlich erleichtern, wie sie im Fachjournal „Nature Machine Intelligence“ berichten. In Zukunft werden laut den Wissenschaftlern um Oliver Bimber vom Institut für Computergrafik vermehrt autonome Drohnen eingesetzt, um Suchgebiete zu vergrößern oder Suchzeiten zu verkürzen.

Kombination vieler Einzelbilder

Das Problem ist, dass derzeit Wärmebildkameras zum Einsatz kommen, die Bilder aus der Differenz von Körperwärme und Umgebungstemperatur erzeugen – ein Verfahren, das in dicht bewaldeten Gebieten keine Ergebnisse liefert. Denn entweder verdeckt die Vegetation den Untergrund zu stark oder die sonnenbestrahlten Bäume haben eine ähnliche Temperatur wie die vermisste Person. Bimber und sein Team haben nun einen Drohnen-Prototypen entwickelt, der diese Aufgabe meistern kann. Die Drohne versucht dabei nicht, wie üblich Personen in einzelnen Wärmebildern zu detektieren, sondern kombiniert mehrere Einzelaufnahmen zu einem Integralbild. Und erst dieses wird mit Hilfe von Deep-Learning-Verfahren klassifiziert, also von der KI ausgewertet.

Drohne bei Personensuche
JKU/Institut für Computergrafik
Mit Künstlicher Intelligenz werden die Drohnenbilder ausgewertet

„Das ganze funktioniert auf dem Messprinzip synthetischer Aperturen, wie es schon in anderen Bereichen genutzt wird, etwa bei Radioteleskopen“, erklärte Bimber gegenüber der APA. Ist etwa der Durchmesser eines Radioteleskops nicht groß genug für eine gute Signalqualität, werden einfach mehrere Teleskope vernetzt, um rechnerisch ein Signal zu erzeugen, das jenem eines viel größeren Teleskops entspricht. Dieses Prinzip nutzen die Linzer Forscher, indem die Drohne Bilder über eine große Fläche aufnimmt. „Die Bilder werden dann so kombiniert, dass sich daraus ein Integralbild ergibt. Dieses entspricht einem Bild, das man mit einer Linse von mehreren hundert Metern Durchmesser aufgenommen hat“, so Bimber.

Während eine Einzelaufnahme mit einer normalen, nur wenige Millimeter großen Linse eine so hohe Tiefenschärfe hat, dass eine vermisste Person fast vollständig verdeckt ist, hat das Integralbild der künstlich erzeugten riesigen Linse nur eine ganz geringe Tiefenschärfe. „Indem wir diese Linse auf den Waldboden fokussieren, wird alles über dem Boden, also etwa die ganzen Bäume, so unscharf, dass es im Integralbild verschwindet, und die vermisste Person wird erkennbar“, erklärte der Wissenschafter. „Die Prototypen funktionieren wirklich gut, wir haben eine Erkennungsrate von 87 bis 95 Prozent im Praxiseinsatz, trotz starker Verdeckung“, sagte Bimber. Mit herkömmlichen Einzelbildern würde man dagegen lediglich eine Erkennungsrate von unter 25 Prozent erreichen.

Trainingsdaten am Uni-Campus aufgenommen

Weil es für diesen Einsatzzweck keine Daten zum Trainieren des Neuronalen Netzes gegeben hat, haben die Forscher eine eigene Datenbasis erstellt, die nun frei zur Verfügung steht. „Wir haben dafür ein Jahr lang Bilddaten von Menschen in allen möglichen Posen von oben aufgenommen, stehend, gehend, sitzend, liegend“, so Bimber. Dabei konnten die Forscher zeigen, dass es gar nicht notwendig ist, diese Bilddaten in allen möglichen Waldtypen aufzunehmen, „weil unser Verfahren die Verdeckung so gut wegrechnet und die Klassifizierung völlig unabhängig von der Verdeckung gelingt“. Daher konnten sie die Trainingsdaten auf einem Testgebiet am Campus der Uni Linz aufnehmen.

Noch ist Flugzeit der Drohnen zu kurz

Die Testmessungen mit den Prototypen wurden dann in ganz unterschiedlichen Wäldern, zu unterschiedlichen Jahreszeiten und unterschiedlichen Bedingungen durchgeführt, nur in der Nacht darf nicht geflogen werden, weil immer Sichtkontakt zur Drohne bestehen muss. Zum Zeitpunkt der Einreichung des „Nature“-Papers sei die Integration und Klassifikation der Bilder noch nicht in Echtzeit erfolgt, das sei aber mittlerweile möglich. Die einzige Einschränkung für einen Einsatz in der Praxis sieht Bimber derzeit in der batteriebedingt limitierten Flugzeit der Drohnen von maximal 30 Minuten. Die Forscher planen aber bereits ein neues Projekt, in dem eine Drohne mit Verbrennungsmotor verwendet werden soll, „und dann wird das Ganze praktikabel“.

Drohne bei Personensuche
JKU/Institut für Computergrafik

Das Verfahren eignet sich den Forschern zufolge aber nicht nur für zivile Such- und Rettungseinsätze, sondern auch in anderen Bereichen wie Überwachungsaufgaben der Polizei oder des Militärs, bei autonomen Fahrzeugen oder Wildbeobachtungen.