Blog · News · 25. Juni 2026

Sehen mit dem Smartphone: Neue KI-App beschreibt die Umgebung in Echtzeit

Eine neue Generation von KI-gestützten Apps beschreibt Menschen mit Sehbehinderung ihre Umgebung nahezu in Echtzeit – von Produktetiketten bis zu Gesichtsausdrücken. Wir schauen uns an, was die Technologie heute schon leistet und wo ihre Grenzen liegen.

Wer stark sehbeeinträchtigt oder blind ist, kennt die vielen kleinen Hürden des Alltags: Welche Dose steht im Küchenregal? Ist das Hemd blau oder grün? Wer sitzt einem gegenüber im Zug? Eine neue Generation von KI-gestützten Apps verspricht hier spürbare Erleichterung. Über die Smartphone-Kamera analysieren sie die Umgebung und beschreiben sie in gesprochener Sprache – von einzelnen Objekten bis zu ganzen Szenen.

Was die neuen Funktionen können

Im Unterschied zu älteren Anwendungen, die vor allem einzelne Barcodes oder kurze Textschnipsel erkannten, verarbeiten aktuelle Modelle ganze Bildszenen und liefern zusammenhängende Beschreibungen: „Eine Person mit einem roten Pullover reicht Ihnen eine Tasse.“ Ergänzend zu klassischen und erweitern solche Apps damit den Zugang zu Informationen, die bisher nur mit fremder Hilfe erschlossen werden konnten. Einige Anwendungen bieten zusätzlich eine Live-Verbindung zu menschlichen Freiwilligen, falls die KI an ihre Grenzen stösst.

Für den Alltag bedeutet das: Einkaufen, Kochen, das Sortieren von Post oder das Erkennen von Personen im Freundeskreis werden potenziell einfacher. Auch in Kombination mit und entstehen neue, alltagstaugliche Kombinationen von .

Wo die Technologie noch an Grenzen stösst

So vielversprechend die Entwicklung ist – Fachleute mahnen zu realistischen Erwartungen. KI-Beschreibungen sind nicht immer korrekt, insbesondere bei ungewohnten Lichtverhältnissen, unklaren Bildausschnitten oder komplexen sozialen Situationen kann es zu Fehleinschätzungen kommen. Auch Datenschutzfragen – etwa wenn Kamerabilder zur Verarbeitung an Server gesendet werden – sind noch nicht abschliessend geklärt. Nutzer:innen berichten zudem, dass die Technologie ein zusätzliches, aber kein alleiniges Hilfsmittel ist: Der Langstock oder ein bleiben für die sichere Mobilität weiterhin unverzichtbar.

Dennoch zeigt die rasante Entwicklung, wie stark technologische Innovation die Selbstständigkeit von Menschen mit Sehbehinderung erweitern kann. Blindklusiv beobachtet diesen Bereich aufmerksam und bringt neue Erkenntnisse regelmässig in unsere Schulungen und Digitale Barrierefreiheit ein, damit neue Technologien auch wirklich alltagstauglich getestet werden, bevor sie breit empfohlen werden. Denn erst der ehrliche Praxistest durch Menschen mit unterschiedlichen Sehbehinderungen zeigt, ob ein vielversprechendes Werkzeug im hektischen Alltag tatsächlich verlässlich funktioniert oder ob es vor allem in ruhigen Vorführsituationen überzeugt.

← zurück zur Blog-Übersicht