Ist es eine Dose Bohnen oder Tomaten? Es ist einfach, wenn Sie das Etikett sehen können – aber stellen Sie sich vor, Sie wären blind oder sehbehindert – könnten Sie den Unterschied erkennen? Und nun überlegen Sie, wie würden Sie zwischen Schmerzmitteln und anderen Tabletten unterscheiden, ohne sehen oder lesen zu können? Fast jeder Fünfte hat versehentlich eine falsche Dosis eingenommen, weil er die Verpackung nicht lesen konnte, Forschung vom Verbrauchergesundheitsunternehmen Haleon vorschlägt.
„Als Menschen möchten wir die Welt um uns herum verstehen“, sagt Saqib Shaikh, Engineering Manager und Produktleiter bei Microsoft, der eine Technologie entwickelt hat, die blinden oder sehbehinderten Menschen hilft, die visuelle und geschriebene Welt zu entschlüsseln .
Shaikh, der im Alter von sieben Jahren erblindete, entwickelte für Microsoft eine App namens Seeing AI, um blinden Menschen zu helfen, sich im Alltag zurechtzufinden. Wenn eine Telefonkamera auf ein Objekt gerichtet wird, verwendet die App künstliche Intelligenz (KI), um es akustisch zu beschreiben. Es kann reale Situationen erzählen, zum Beispiel jemanden beschreiben, der vorbeigeht, und Texte vorlesen, zum Beispiel eine Speisekarte.
Jetzt hat Shaikh seine Aufmerksamkeit auf das Thema Gesundheit und die Herausforderungen rund um die Verpackung gerichtet. Er hat dem Verbrauchergesundheitsunternehmen Haleon dabei geholfen, die 2017 erstmals eingeführte Seeing AI-App so anzupassen, dass sie reibungslos mit seinen Gesundheits- und Wohlfühlprodukten zusammenarbeitet. Durch das Zeigen eines Telefons auf einen Barcode auf einem Artikel kann eine Person nun eine Beschreibung anhören und leicht Informationen über Dosis, Geschmack oder Verwendung eines Produkts finden. „Niemand möchte auf Hilfe warten, um die Packung mit Schmerzmitteln oder ein Gesundheitsprodukt zu lesen“, sagt er.
Hinter den Kulissen wurde viel Aufwand betrieben, um spezifische Informationen für 1.500 Produkte in eine Datenbank hochzuladen, sagt Tamara Rogers, Chief Marketing Officer bei Haleon. Die Untersuchungen des Unternehmens zeigen, dass mehr als neun von zehn (94 %) Menschen es für wichtig halten, dass jeder auf die Informationen auf Etiketten und Anweisungen auf Gesundheitsprodukten zugreifen kann, und dass Alphabetisierung ein erhebliches Hindernis darstellt.
„Die medizinische Sprache ist ziemlich herausfordernd und nicht jeder kann komplizierte Informationen und Anweisungen lesen oder befolgen“, sagt Rogers.
Sie fügt hinzu: „Wir wollen unseren Teil zur Inklusion beitragen. Die Fähigkeit, Ihre Gesundheit auf unabhängige Weise zu verwalten, ist wichtig. Wir haben uns zum Ziel gesetzt, bis 2025 50 Millionen Menschen zu erreichen und sie zu einer besseren Gesundheit im Alltag zu unterstützen.“
Während die Seeing AI-App bereits Texte vorliest, erleichtert ihre neueste Verfeinerung das Auffinden der Informationen. Die Verpackung liest sich oft nicht wie ein Buch, und der Text kann durcheinander geraten. Mit Audiosignalen führt die App den Benutzer zum Barcode auf der Produktverpackung, um den Code mit der Gerätekamera auszurichten, und liefert wichtige Details durch einfaches Antippen. „Wir haben es einfacher gemacht, zwischen verschiedenen Arten von Informationen zu wechseln“, sagt Shaikh.
Und obwohl die Technologie ursprünglich entwickelt wurde, um blinden Menschen zu helfen, hat sie sich auch als Rettungsanker für Menschen erwiesen, die Schwierigkeiten beim Lesen haben oder Englisch nicht als Muttersprache haben, sagt Rogers. Im Vereinigten Königreich sind etwa 2 Millionen Menschen blind oder sehbehindert. NHS-Zahlen zeigenund mehr als 8,5 Millionen kämpfen mit dem Lesen, nach Angaben des National Literacy Trust. „Die App spricht mit Ihnen – Sie können sie zu Hause oder beim Einkaufen verwenden“, sagt Rogers. „Es gibt eine ganze Menge Menschen, die pflegen, sehbehindert sind oder das Kleingedruckte nicht lesen können, die davon profitieren werden.“
Startschuss am 13. Oktober zeitgleich mit Welttag des Sehensdie aktualisierte App ist jetzt kostenlos auf Apple-Geräten verfügbar, und auch Microsoft geht den wichtigen Schritt, Seeing AI zukünftig auch für Android-Nutzer verfügbar zu machen.
Die Zusammenarbeit zwischen Microsoft und Haleon sei ein Meilenstein auf dem Weg zu mehr Inklusivität, sagt Shaikh. Im Laufe der Jahre hat er aus erster Hand erfahren, welche Freiheit Technologie mit sich bringt – vom Computer im Klassenzimmer, der zuerst Text vorlas, bis hin zu seiner eigenen Software von heute. „Ich habe in der Schule gesehen, wie Technologie das Leben verbessern und gleiche Wettbewerbsbedingungen schaffen kann.“
Als er Seeing AI als Nebenprojekt während seiner Arbeit bei Microsoft ins Leben rief, hatte er den Einblick, was benötigt wurde. Es kann Menschen dabei helfen, Banknotenwerte zu unterscheiden, eine Hauptstraße zu beschreiben und einen Freund zu erkennen. Es kann auch Bilder beschreiben, was es wiederum blinden Menschen ermöglicht, sich umfassender am sozialen Geplauder im Internet zu beteiligen. „Und das hilft bei der sozialen Inklusion“, sagt Shaikh. „Jetzt nutzen wir wirklich die Spitzentechnologie von KI und Augmented Reality, um Menschen mit Behinderungen zu helfen.“
Er fährt fort: „Stellen Sie sich diese Technologie wie einen kleinen Freund auf Ihrer Schulter vor, der Ihnen ins Ohr flüstert, während Sie Ihrem Leben nachgehen. Das ist die Macht der KI. Wir nutzen die neuesten Entwicklungen in Technologie und Wissenschaft, um Probleme anzugehen, denen Menschen in ihrem täglichen Leben begegnen. Es gibt dir Autonomie, Unabhängigkeit.“
Haleon beabsichtigt, die App auf weitere internationale Märkte und in andere Sprachen auszurollen. Als Open-Source-Technologie könnten andere Konsumgüterunternehmen schließlich ihre Marken hochladen, sagt Rogers. „Und dann wird es eine noch bessere Ressource für Menschen mit Sehbehinderung oder [have] Alphabetisierungsprobleme.“
Finde heraus wie Haleon macht die Gesundheitskennzeichnung für alle zugänglich. Laden Sie die Microsoft Seeing AI herunter App kostenlos aus dem Apple App Store