Schlechte Forschung: Ein Vergleich der Lesegeschwindigkeiten von iPad, Kindle und Büchern

Wir lieben eine Usability-Studie genauso wie die nächste Person. Aber wir lieben gut gestaltete, elegante Studien, die zu Recht auf ihre eigenen Grenzen hinweisen und vor allem in Fachzeitschriften gedruckt werden. Wir lieben Studien, die als Propaganda dienen, oder Forscher, die Schlussfolgerungen ziehen, die nicht auf ihren eigenen Daten beruhen.

Schlechte Forschung kann überall gefunden werden - selbst von Beratern, die ihren Lebensunterhalt mit der Erforschung der Benutzerfreundlichkeit verdienen. Wohlmeinende Leute wie Jakob Nielsen. Kürzlich veröffentlichte er auf seiner Website eine Studie über die Benutzerfreundlichkeit des Kindle, des iPad, eines PCs und eines Buches zum Lesen einer Kurzgeschichte.

Nachdem die Autoren dieses Berichts festgestellt haben, dass es keinen statistischen Unterschied zwischen dem Lesen auf dem Kindle oder dem iPad und der Feststellung gibt, dass die Daten für das iPad im Vergleich zu einem Buch keine statistische Signifikanz erreicht haben, erklären sie immer noch, dass „Bücher schneller als Tablets“ sind.

Ja, das stimmt auf den ersten Blick. Der Punkt der Forschung und statistischen Analyse ist jedoch in erster Linie, über das hinauszugehen scheint um wahr zu sein und zu sehen, ob der Unterschied sinnvoll ist oder nicht.Daten sehen zwar so aus, als ob sie etwas bedeuten, aber wenn die Statistiken sie nicht sichern, ist das Auftreten von Bedeutung nur eine Illusion. Eine, die in den Untertiteln nicht hervorgehoben werden sollte, da sie irreführend ist.

Tatsächlich ergaben die Daten aus dieser speziellen Studie, dass nur das Lesen auf dem Kindle statistisch anders war als das Lesen eines Buches. Aber das ist eine weitaus weniger sexy Schlussfolgerung als die allgemeineren "Bücher schneller als Tablets".

Alternative Erklärungen für die Ergebnisse wurden in dieser Studie nicht angeboten, eine krasse Auslassung. Die naheliegendste alternative Erklärung für die gefundenen Ergebnisse ist einfach, dass die Leute eine große Vertrautheit und Erfahrung mit dem Lesen des gedruckten Wortes in einem Buch haben - oftmals jahrzehntelang wert! Andererseits war der Zeit- und Erfahrungsaufwand für das Lesen von einem neueren Gerät - sei es ein Kindle oder iPad oder sogar der PC - äußerst begrenzt. Auf jeden Fall haben die Menschen nicht Jahrzehnte damit verbracht, Bücher von einem dieser Geräte zu lesen. Es könnte also einfach eine Frage der Vertrautheit sein - Bücher sind einfache, vertraute Methoden, um Lesematerial aufzunehmen. Der Kindle und das iPad sind (noch) nicht.

Diese alternative Erklärung erklärt auch den Unterschied zwischen den Datenergebnissen des Kindle und des iPad (der Kindle war statistisch signifikant langsamer als ein Buch, das iPad jedoch nicht). Das iPad verwendet einen Bildschirm, mit dem die meisten Menschen bereits vertraut sind, und die Benutzerfreundlichkeit von Apple in Bezug auf diese Art von Handheld-Geräten ist allgemein anerkannt. Der Kindle hingegen verwendet eine Bildschirmtechnologie, auf die nur wenige Menschen jemals gestoßen sind. Der Kindle ist zwar in alltäglichen Situationen weitaus nützlicher (z. B. beim Lesen im Freien oder ohne sich Sorgen machen zu müssen, dass er jeden Tag aufgeladen werden muss), aber er ist einfach ein unbekannteres Gerät mit unbekannter Technologie.

Zu den Einschränkungen der Studie zählen das Design und der Themenpool. Während 24 Probanden uns ausreichend Kraft für statistische Analysen geben können, sind die Lesestile der Menschen so unterschiedlich, dass ein größeres Experiment zu robusteren und schlüssigeren Ergebnissen führen kann. Eine Person zu bitten, dieselbe 17-minütige Geschichte viermal hintereinander zu lesen, scheint ebenfalls nicht ideal. Obwohl die Reihenfolge der Geräte, in denen sie lesen, zufällig war, kann ich mir nicht helfen, darüber nachzudenken, wie langweilig und eintönig es wäre, dieselbe Geschichte viermal hintereinander immer wieder zu lesen.

Das Anbieten verschiedener Arten von Lesematerial - sowohl Belletristik als auch Sachbücher - würde auch mögliche Auswirkungen ausschließen, dass die Art des als Maß verwendeten Inhalts die Lesegeschwindigkeit nicht versehentlich beeinflusst. Hemingway - der Autor, der in der aktuellen Forschung verwendet wird - ist ein großartiger Autor, aber ich würde kaum sagen, dass er jedem gefällt oder schmeckt. Lesematerial, an dem Sie wenig Interesse haben, kann sich auch auf die Lesezeiten auswirken.

Diese Studie hat gezeigt, dass verschiedene Tischcomputer zum Lesen einer Kurzgeschichte die Lesezeiten für diejenigen, die mit den Geräten nicht besonders vertraut sind, nicht wesentlich beeinflussen (außer auf dem Kindle, wo die Lesezeit erheblich langsamer war). Es überrascht nicht, dass iPad, Kindle und Buch alle ähnliche Werte für die Benutzerzufriedenheit aufwiesen. Dies zeigt, dass die Geräte keine wesentlichen Probleme mit der Benutzerfreundlichkeit aufweisen, die die Zufriedenheit des Endbenutzers mit ihrer Verwendung beeinträchtigen.