211service.com
Handys, die zuhören und lernen
Forscher verwenden zunehmend Mobiltelefone, um das Verhalten und die sozialen Interaktionen der Nutzer besser zu verstehen. Die vom GPS-Chip oder Beschleunigungsmesser eines Telefons gesammelten Daten können beispielsweise Trends aufzeigen, die für die Modellierung der Ausbreitung von Krankheiten, die Ermittlung des persönlichen Gesundheitsbedarfs, die Verbesserung des Zeitmanagements und sogar die Aktualisierung sozialer Netzwerke relevant sind. Auch das sogenannte Reality Mining wird vorgeschlagen, um gezielte Werbung zu verbessern oder Handys smarter zu machen: Ein Gerät, das weiß, dass sich sein Besitzer in einer Besprechung befindet, könnte beispielsweise seinen Klingelton automatisch ausschalten.
Jetzt hat eine Gruppe am Dartmouth College in Hannover, NH, eine Software entwickelt, die das Mikrofon eines Mobiltelefons verwendet, um die Aktivität eines Benutzers zu verfolgen und zu interpretieren. Die Software, genannt SoundSense , nimmt Geräusche auf und versucht sie in bestimmte Kategorien einzuordnen. Im Gegensatz zu früher entwickelter ähnlicher Software kann SoundSense völlig unbekannte Geräusche erkennen und läuft zudem komplett auf dem Gerät. SoundSense klassifiziert Geräusche automatisch als Stimme, Musik oder Umgebungsgeräusche. Wenn ein Ton oft genug oder lange genug wiederholt wird, weist SoundSense ihm einen hohen Tonrang zu und fordert den Benutzer auf, seine Bedeutung zu bestätigen und bietet die Möglichkeit, den Ton zu beschriften.
Das Team von Dartmouth konzentrierte sich auf die Überwachung von Geräuschen, da jedes Telefon über ein Mikrofon verfügt und Beschleunigungsmesser nur begrenzte Informationen liefern. Wenn wir an Klänge denken, denken wir normalerweise nicht, dass sie auch einen Ort mit einer einzigartigen Signatur darstellen können, sagt Andrew Campbell , Professor für Informatik in Dartmouth und leitender Forscher des Projekts. Die Forscher haben darauf geachtet, dass das Programm klein ist, damit es nicht zu viel Strom verbraucht. Aus Datenschutzgründen haben sie SoundSense so entwickelt, dass keine Informationen zur Verarbeitung vom Gerät entfernt werden. Darüber hinaus speichert das Programm selbst keine rohen Audioclips. Ein Benutzer kann der Software auch anweisen, alle Geräusche zu ignorieren, die als verboten gelten.
In Tests konnte die SoundSense-Software korrekt bestimmen, wann sich der Benutzer in einem bestimmten Café befand, nach draußen ging, sich die Zähne putzte, Fahrrad fuhr oder im Auto fuhr. Es nahm auch das Geräusch eines Geldautomaten und eines Ventilators in einem bestimmten Raum auf. Die Ergebnisse der Experimente werden diese Woche auf der MobiSys 2009 Konferenz in Krakau, Polen.
Das SoundSense-System ist unser erster Schritt beim Aufbau eines Systems, das [Benutzerverhalten] unterwegs lernen kann, sagt Tanzeem Choudhury , ein Assistenzprofessor in Dartmouth, der auch ein Leiter des Projekts und ein TR35-Gewinner war. Choudhury sagt, dass es für die praktische Anwendung unerlässlich sein wird, der Software zu ermöglichen, neue Geräusche zu erkennen. Ein System, das Geräusche im Leben eines Menschen erkennen kann, kann verwendet werden, um nach anderen zu suchen, die die gleichen Vorlieben haben, sagt sie. Die Verwendung von Tönen zum Klassifizieren von Ereignissen kann Benutzern Feedback zu ihren täglichen Aktivitäten für Gesundheits- oder Zeitmanagementanwendungen geben, fügt sie hinzu.
Die Telefone haben Ohren: SoundSense hört die Umgebung eines Benutzers über das Mikrofon eines Telefons und lernt, bestimmte Geräusche mit Aktivitäten zu verbinden.
Kurt Rebhuhn , ein Forscher am Palo Alto Research Center, der auch Handy-Software entwickelt hat, die das Verhalten verfolgt, ist der Ansicht, dass das SoundSense-Projekt eine zu wenig genutzte Ressource ausnutzt. Ich glaube nicht, dass die Branche wirklich erkannt hat, wie wenig Leistung audiobasiertes Activity-Sensing benötigt und wie informativ es sein kann, sagt Partridge. Audio kann so viele weitere Aktivitäten unterscheiden [und] fügt der Kontextwahrnehmung einen sozialen Aspekt hinzu, der sonst nicht möglich wäre.
Dan Ellis , ein außerordentlicher Professor an der Columbia University, der die Verwendung kontinuierlicher Audioaufzeichnungen erforscht hat, sagt, dass diese Art der Lebensprotokollierung eines Tages so routinemäßig wie der Postausgang in einer E-Mail-Anwendung verwendet werden könnte. Vielleicht schaust du nicht oft in deinen Postausgang, aber mit den richtigen Tools, um schnell zu finden, wonach du suchst, ist es sehr praktisch, jede E-Mail, die dir jemals gesendet wurde, aufzuzeichnen, sagt er. Eine nahezu kontinuierliche, audiobasierte Aufzeichnung, die von einem persönlichen Gerät gesammelt wird, könnte ähnlich wünschenswert sein.