211service.com
Inspiriert von Wikipedia schaffen Sozialwissenschaftler eine Revolution bei Online-Umfragen
Das Sammeln von Daten über menschliche Vorlieben und Aktivitäten ist das A und O vieler Forschungen in den Sozialwissenschaften. Doch wie man diese Daten am besten sammelt, wird seit langem heftig diskutiert.
Sozialwissenschaftler haben im Wesentlichen zwei Möglichkeiten. Einerseits gibt es Meinungsumfragen, die auf einer Reihe von Multiple-Choice-Fragen basieren, einem sogenannten geschlossenen Ansatz. Andererseits gibt es offene Ansätze in Form freier Interviews, in denen die Befragten ihre Meinung frei äußern können. Es gibt eindeutig wichtige Vor- und Nachteile jeder Methode.
Heute skizzieren Matthew Salganik von der Princeton University in New Jersey und Karen Levy von der New York University eine völlig neue Art der Datenerfassung, die von einer neuen Generation von Informationsaggregationssystemen wie Wikipedia inspiriert ist. So wie sich Wikipedia im Laufe der Zeit basierend auf Beiträgen von Teilnehmern weiterentwickelt, stellen wir uns eine sich entwickelnde Umfrage vor, die von Beiträgen von Befragten angetrieben wird, sagen sie.
Sie sagen, dass der neue Ansatz Erkenntnisse liefern kann, die mit anderen Methoden nur schwer zu gewinnen wären. Sie stellt aber auch Sozialwissenschaftler vor Herausforderungen, insbesondere bei der Analyse der so erhobenen Daten.
Projekte wie Wikipedia sind das Ergebnis von nutzergenerierten Inhalten in großem Umfang. Die Frage, die Salganik und Levy stellen, ist, ob Umfragen auch von den Befragten selbst konstruiert werden könnten, zumindest teilweise.
Um das herauszufinden, haben diese Leute eine neue Art von Datenerfassungsmechanismus entwickelt, den sie Wiki-Umfrage nennen. Dies beginnt mit einer Reihe von Seed-Fragen, ermöglicht es den Befragten jedoch, je nach Umfang der Umfrage ihre eigenen Fragen hinzuzufügen.
Diese Wiki-Umfrage hat eine besondere Form, bei der die Befragten gebeten werden, zwischen zwei Optionen zu wählen: Bevorzugen sie beispielsweise Punkt A oder Punkt B? Aber entscheidend ist, dass sie auch ein neues Element hinzufügen können, das zukünftigen Teilnehmern präsentiert wird. Mit der Zeit steigt die Anzahl der zur Auswahl stehenden Elemente, da die Befragten ihre eigenen Ideen vorschlagen.
Diese Art der paarweisen Erhebung hat eine Reihe von Vorteilen. Salganik und Levy weisen darauf hin, dass dieses Format es den Teilnehmern ermöglicht, auf so viele Auswahlmöglichkeiten zu reagieren, wie sie möchten. Sie nennen diese Eigenschaft Gier.
Diese Art von Umfrage ermöglicht es den Befragten auch, neue Elemente beizusteuern, wann immer sie möchten, und ist somit einzigartig kollaborativ. Schließlich können die Paaren, die neuen Teilnehmern präsentiert werden, so ausgewählt werden, dass das Lernen auf der Grundlage früherer Antworten maximiert wird, sodass sich eine Wiki-Umfrage an ihre Entwicklung anpassen kann.
Um die Idee zu testen, erstellten Salganik und Levy eine kostenlose Website namens www.allourideas.org auf dem jeder eine paarweise Wiki-Umfrage erstellen und Befragte aus einer zur Teilnahme ermutigten Zielgruppe sammeln kann. Seit 2010 hat diese Website rund 5.000 paarweise Wiki-Umfragen gehostet, die 200.000 Elemente umfassten und 5 Millionen Antworten erhielten.
Salganik und Levy diskutieren ausführlich das Beispiel einer Umfrage des Büros für langfristige Planung und Nachhaltigkeit, das vom Bürgermeister von New York City geleitet wird. Diese Organisation wollte die Vorstellungen der Bewohner zum Nachhaltigkeitsplan der Stadt verstehen und alle neuen Gedanken integrieren.
Das Büro des Bürgermeisters begann mit einer Liste von 25 Startelementen, die die Leute paarweise vergleichen sollten, und ermutigte die Teilnehmer gleichzeitig, ihre eigenen Ideen hinzuzufügen. So wurden die Menschen beispielsweise gebeten, zwischen offenen Schulhöfen in der ganzen Stadt als öffentliche Spielplätze und gezielter Baumpflanzungen in Stadtteilen mit hohen Asthmaraten zu wählen.
In vier Monaten trugen 1.436 Befragte über 30.000 Antworten und 464 neue Ideen zur Umfrage bei. Am Ende der Umfrage wurden acht der 10 Ideen mit der höchsten Punktzahl von den Befragten selbst beigetragen.
Dazu gehörten Ideen, die mit anderen Datenerfassungsmethoden wahrscheinlich nicht aufgekommen wären, wie z. B. Halten Sie das Trinkwasser von NYC sauber, indem Sie Fracking in der Wasserscheide von NYC verbieten, und schließen Sie Schiffe an das Stromnetz an, damit sie nicht im Hafen liegen bleiben, wodurch die Emissionen von 12.000 Autos reduziert werden pro Schiff.
Salganik und Levy weisen schnell darauf hin, dass ihre Methode noch erheblicher weiterer Forschung bedarf.
Insbesondere müssen sie die Konsistenz und Gültigkeit der von ihnen generierten Antworten besser verstehen. Dies könnte durch einen Vergleich der Ergebnisse mit denen erfolgen, die durch andere Formen der Datenerhebung gesammelt wurden.
Außerdem ist die Analyse der Daten aus paarweisen Wiki-Umfragen immer noch so etwas wie ein statistisches Experiment. Und sie stellen die statistische Gemeinschaft vor eine Art Herausforderung, die effizientesten Wege zu finden, um Informationen aus dieser Art von Prozessen zu extrahieren.
Das ist ein interessanter neuer Ansatz, der die Sammlung von Daten ermöglicht, die mit anderen Methoden nur schwer zu bekommen wären. Insbesondere ermöglicht es, Daten auf eine Weise zu sammeln, die die bekannte langfristige Verteilung der Beitragszahler widerspiegelt.
Auf Wikipedia zum Beispiel werden die meisten Informationen von einem winzigen Teil der Redakteure intuitiv erlernt. Wenn Wikipedia 10 und nur 10 Bearbeitungen pro Redakteur zulassen würde – ähnlich wie bei einer Umfrage, bei der die Befragten nur ein und nur ein Formular ausfüllen müssen – würde dies etwa 95 % der beigesteuerten Bearbeitungen ausschließen, sagen Salganik und Levy.
Natürlich muss diese Art von Verzerrung bei der Datenanalyse berücksichtigt werden. Und darin liegt eine große Herausforderung. Zeit für die Statistiker, sich zu beschäftigen.
Ref: arxiv.org/abs/1202.0500 Wiki-Umfragen: Offene und quantifizierbare Erhebung sozialer Daten