KI-Tool hilft Nutzern mit Sehverlust, sich besser an Umgebungen zu erinnern

Das KI-System VIPTour soll die Art und Weise, wie Menschen mit Blindheit oder Sehschwäche (BLV) neue Umgebungen entdecken, erheblich verbessern.

Ein Forschungsteam hat VIPTour als System entwickelt, das es Benutzern ermöglicht, Parks und Touristenattraktionen unabhängig zu entdecken, was wiederum ihr Vergnügen und Verständnis für Räume verbessert. Ihre Ergebnisse wurden in Nature veröffentlicht.

Das System integriert eine kompakte Kamera mit einer Smartphone-Anwendung, die einen AI-Algorithmus namens FocusFormer ausführt. FocusFormer verarbeitet Szenen in Echtzeit, um wichtige Punkte wie Sicherheitsmarkierungen zu identifizieren.

Das System bietet Erkundungsempfehlungen, die sich an individuelle Benutzerpräferenzen anpassen, wie zum Beispiel die Auswahl von natürlichen Klängen über historische Informationen.

Die Forscher argumentieren, dass die BLV-Gemeinschaft durch VIPTour profitieren könnte, durch individuell angepasste Anleitungen basierend auf den Interessen der Nutzer, vereinfachte Audioanweisungen, taktile Beschreibungen komplexer Szenen sowie Möglichkeiten zur Wiedergabe und zum Teilen von Touren. Das System soll Funktionen bereitstellen, die dazu dienen, Nutzererfahrungen über die grundlegende Unterstützung hinaus zu verbessern.

In Versuchen mit mehr als 30 BLV-Teilnehmern waren die Vorteile beeindruckend. Das emotionale Wohlbefinden verbesserte sich dramatisch, mit einer Steigerung der positiven Emotionen um 67,9% und einem Anstieg der Begeisterung um 94,7%. Die Nutzer zeigten auch eine Verbesserung der Erinnerung an Szenen um 772,73% und die Langzeitspeicherung verdoppelte sich.

Viele berichteten, dass sie sich autonomer fühlten und weniger auf andere angewiesen waren, um sich zurechtzufinden oder ihre Umgebung zu verstehen. Die Forscher weisen darauf hin, wie Millionen von BLV-Individuen aufgrund unzugänglicher Umgebungen von Freizeitaktivitäten ausgeschlossen werden, so das Forschungsteam.

Während existierende Hilfsmittel den Menschen helfen, von einem Ort zum anderen zu gelangen, schaffen sie oft keine angenehmen, unvergesslichen Erlebnisse. VIPTour versucht, diese Lücke zu schließen, indem es fortschrittliche KI mit durchdachtem, benutzerzentriertem Design verbindet.

Die Entwickler hoffen, dass VIPTour mehr inklusive Technologien inspirieren wird, die sich nicht nur auf Zugänglichkeit konzentrieren, sondern auch auf Autonomie und Freude.