211service.com
App Spots Objekte für Sehbehinderte
Als ich neulich morgens durch mein Büro ging, erzählte eine weibliche Stimme auf meinem iPhone die Objekte, an denen ich vorbeiging. Backstein, Wand, Telefon, sagte sie nüchtern. Die Stimme hielt inne, als ich auf ein Fahrrad stieß, das an einem Wandständer hing, und intonierte dann Fahrrad.
Die Stimme ist Teil einer kostenlosen Bilderkennungs-App namens Aipol das versucht, Menschen mit Sehbehinderungen das Erkennen ihrer Umgebung zu erleichtern. Um es zu verwenden, richten Sie die Rückkamera des Telefons auf das, was Sie identifizieren möchten, und Aipoly spricht, was es sieht (oder zumindest das, was es zu sehen glaubt) und zeigt den Namen des Objekts auf dem Display des Telefons an. Aipoly läuft direkt auf Ihrem Telefon, sodass es keinen Internetzugang benötigt, um zu funktionieren, und es kann ein Objekt nach dem anderen identifizieren, während Sie das Telefon bewegen, ohne dass Sie ein Foto von jedem Objekt machen müssen.
Die Macher von Aipoly hoffen, dass die App für Menschen mit schweren Sehbehinderungen hilfreich sein kann – und vielleicht für diejenigen, die versuchen, eine neue Sprache zu lernen. Sie hoffen auch, dass es schneller sein wird als andere Bilderkennungs-Apps, die auf die Hilfe anderer Menschen angewiesen sind, wie z Sei meine Augen , oder die das Internet erfordern, wie z Tippen Sie auf TapSee .
Die App wurde Anfang dieses Jahres von einem gleichnamigen Start-up aus Melbourne für das iPhone eingeführt. Aipoly-Mitbegründer Simon Edwardsson sagt, dass es Bilder mithilfe von Deep Learning erkennt, einer maschinellen Lerntechnik, die von Studien des Gehirns inspiriert ist. Es ist die gleiche Technologie, die von Facebook zum Erkennen von Gesichtern und Google zum Suchen von Bildern verwendet wird.
Die App findet heraus, was etwas ist, indem sie ein Bild in verschiedene Merkmale wie Kurven, Linien und Muster (z. B. Streifen) zerlegt und diese Merkmale dann verwendet, um die Wahrscheinlichkeit zu bestimmen, dass das Bild ein bestimmtes Objekt ist.
Aipoly konnte mir sagen, welche vielen Dinge ich in meinem Büro finden kann, obwohl es noch viel Arbeit braucht. Es kann bisher nur etwa 1.000 Objekte erkennen; Edwardsson sagt, dass das Unternehmen versucht, die Zahl auf 5.000 zu erhöhen, obwohl das immer noch nicht allzu viele wären, wenn man bedenkt, wie viele verschiedene Dinge einem jeden Tag begegnen.
Und während die App beim Erkennen eines Objekts häufig korrekt war, selbst wenn es teilweise verdeckt war (z. B. Kopfhörer um den Hals meines Kollegen), gab es auch viele Aussetzer.
Zum Beispiel sagte seine weibliche Stimme Chevrolet, dann Rad und schließlich Maus, während das Telefon auf meine Computermaus gerichtet war. Und die App hat eine Mikrowelle immer wieder fälschlicherweise als Klimaanlage identifiziert.
Die iPhone-App von Aipoly verwendet künstliche Intelligenz, um Objekte zu identifizieren, während Sie Ihr Telefon bewegen.
Benutzer können Aipoly trainieren, indem sie ein richtiges Wort oder einen richtigen Satz eingeben, um ein Objekt zu identifizieren, das es falsch versteht; Diese Daten werden dann auf die Server von Aipoly hochgeladen, und das Startup wird etwa alle paar Wochen Beschreibungen zu Aipoly hinzufügen, wenn es neue Versionen der App veröffentlicht, sagt Edwardsson.
Jeff Bigham , ein außerordentlicher Professor für Mensch-Computer-Interaktion an der Carnegie Mellon University, der Hilfstechnologien studiert, sagt, dass Aipoly anscheinend ziemlich gut funktioniert und dazu verwendet werden könnte, ein Gefühl für Ihre Umgebung zu bekommen, indem Sie das Telefon um Sie herum bewegen. Aber er fragt sich, wie nützlich einige seiner Fähigkeiten zur Objektidentifizierung sind, da Menschen dazu neigen, gut zu bestimmen, was etwas ist, indem sie es berühren.
Viel nützlicher ist es, Dinge zu unterscheiden, die ansonsten nicht zu unterscheiden sind, sagt er, wie Dosen oder Schachteln mit Lebensmitteln, die sich ungefähr gleich anfühlen.