Computer an Ihren Fingerspitzen

Im April präsentierten zwei Forschungsgruppen des MIT Media Lab auf der Computer-Human Interaction Conference der Association for Computing Machinery’s Computer-Human Interaction Conference, der wichtigsten Konferenz für Computer Interface Design, Prototypen von Eingabegeräten, die – obwohl beide am Finger getragen – sehr unterschiedlichen Zwecken dienen.





Ein auf einem Thumbnail montiertes Trackpad ermöglicht es Benutzern, elektronische Geräte zu steuern, wenn sie alle Hände voll haben.

Ein Gerät aus der Fluid Interfaces-Gruppe von Pattie Maes ist ein Text-zu-Sprache-Konverter für blinde Benutzer. Es wird wie ein Ring getragen, verfügt über eine eingebaute Kamera und verwendet Audio- oder taktiles Feedback, um Benutzern zu helfen, ihre Finger entlang von Textzeilen zu scannen.

Das andere Gerät, ein gemeinsames Projekt der Living Mobile-Gruppe von Chris Schmandt und der Responsive Environment-Gruppe von Joe Paradiso, wurde von einem kosmetischen Produkt inspiriert – bunten Aufklebern auf Fingernägeln, die besonders in Asien beliebt sind. Es handelt sich um ein auf einem Daumennagel montiertes Trackpad, mit dem Benutzer ihre tragbaren Geräte steuern können, wenn sie alle Hände voll zu tun haben – zum Beispiel, um ans Telefon zu gehen oder während des Kochens durch ein Rezept zu blättern. Es könnte auch andere Eingabegeräte erweitern und jemandem, der beispielsweise eine Textnachricht eingibt, ermöglichen, schnell zwischen Symbolsätzen hin- und herzuschalten.



Das Herzstück der Lesehilfe ist ein neuartiger Algorithmus, der visuelle Informationen aus Text extrahiert. Jedes Mal, wenn der Benutzer seinen Finger am Beginn einer neuen Zeile positioniert, schätzt der Algorithmus die Grundlinie des Textes. Es verfolgt dann jedes Wort, das an der Kamera vorbeigleitet. Wenn es erkennt, dass sich ein Wort in der Nähe der Mitte des Sichtfelds der Kamera befindet – was Verzerrungen reduziert –, isoliert es dieses Wort.

Die Baseline-Schätzung ermöglicht es dem Algorithmus auch, das Wort neu auszurichten und Verzerrungen durch seltsame Kamerawinkel zu kompensieren, bevor es an Open-Source-Software weitergegeben wird, die die Zeichen erkennt und erkannte Wörter in synthetisierte Sprache übersetzt.

Jeder, der beim Lesen Hilfe braucht, kann davon profitieren, sagt Roy Shilkrot, Doktorand in Maes’ Gruppe und einer der Designer des Geräts. Wir haben viele E-Mails und Anfragen von Organisationen bekommen, aber zum Beispiel auch von Eltern von Kindern mit Legasthenie.



Um das nagelmontierte Gerät zu bauen, mussten die Forscher Berührungssensoren, eine Batterie, eine Antenne und drei separate Chips – einen Mikrocontroller, einen Bluetooth-Funkchip und einen Sensorcontroller – in einen Raum packen, der nicht größer als ein Daumennagel war. Der schwierigste Teil war wahrscheinlich das Antennendesign, sagt Artem Dementyev, ein Doktorand in Paradisos Gruppe. Sie müssen die Antenne weit genug von den Chips entfernt platzieren, damit sie diese nicht stört.

verbergen