Im Schlamm ruht sich ein großes Nilpferd aus
Virtuelle Videosafaris für blinde und sehbehinderte Personen
Oliver Bendel und Doris Jovic

Inclusive AI ist ein junges Forschungsfeld und zugleich ein Anwendungsgebiet, wo KI-Systeme aller Art verwendet werden, um behinderte und beeinträchtigte Personen zu unterstützen und ihnen Teilhabe zu ermöglichen. Dabei spielt u.a. generative KI eine Rolle, etwa in Form von Multimodal Large Language Models (MLLM). Diese sind auch in die Animal-Computer Interaction eingezogen, etwa innerhalb von Apps, die Verhaltenstipps für Benutzer geben, die auf Tiere treffen. Im VISUAL-Projekt an der Hochschule für Wirtschaft FHNW wurden beide Disziplinen kombiniert, um neues Potenzial zu erschließen.
Der Prototyp erlaubt es blinden und sehbehinderten Personen, auf virtuelle Videosafaris zu gehen. Es werden öffentlich verfügbare Wildtier-Webcams integriert und die Live-Bilder mit Hilfe eines MLLM analysiert und evaluiert. Für unterschiedliche Bedürfnisse sind unterschiedliche Profile und Modes verfügbar. Ein Text-to-Speech-System vermittelt die Beschreibungen und Erklärungen. Der Prototyp zeigt die technische Machbarkeit und das Potenzial für Inclusive AI und ACI. Es gilt allerdings auch Einschränkungen zu berücksichtigen, etwa mit Blick auf kommerzielle MLLMs und punktuell unzutreffende Beschreibungen, und es muss weitere Forschung und Entwicklung stattfinden, um das Erlebnis wirklich inklusiv und autonom zu machen.
Weiterlesen mit Login
Noch nicht registriert?
Registrieren Sie sich jetzt kostenfrei und Sie erhalten vollen Zugriff auf alle exklusiven Beiträge. Mit unserem Newsletter senden wir Ihnen Top-Meldungen aus der Automatisierung, Bildverarbeitung und Licht- und Lasertechnik im Industrieumfeld. Außerdem erhalten Sie regelmässig Zugriff auf unsere aktuellen E-Paper.
RegistrierenMeist gelesen

Warum viele Vision-AI-Projekte trotz guter Modelle scheitern
KI-Modelle liefern in der industriellen Bildverarbeitung oft gute Resultate in der Pilotphase, im Serienbetrieb stoßen sie aber schnell an Grenzen.

Objektive vollautomatisierte optische Paletten-Klassifizierung
Ein automatisiertes System zur Prüfung von Ladungsträgern ersetzt die manuelle Bewertung durch eine schnelle, objektive und reproduzierbare Klassifizierung.

Lidar-basierte 3D-Breitenmessung im Free-Flow-Verkehr
Tunnel sind für den Verkehr unverzichtbar, komplexe Technik im Tunnel und auch davor respektive danach spielt dabei eine wesentliche Rolle.

Standard, Sonderanfertigung oder Hybrid? Das richtige Fixierkonzept
Standard, Sonderanfertigung oder Hybrid: Die Wahl des Fixierkonzepts beeinflusst Kosten, Durchlaufzeit und Prozesssicherheit. Wann welcher Ansatz sinnvoll ist und warum Hybrid-Lösungen oft am effizientesten sind.

3D-Laserscanning für die 100-Prozent-Prüfung
Die moderne Produktion verlangt nach präzisen, schnellen und vollautomatischen Prüfprozessen. Diese Forderung bedient das robotergestützte Inline-Messsystem Flexscan mit Hilfe zweier 3D-Kompaktsensoren.






