Die Studie, die aus 5.000 einzelnen Suchanfragen bestand, verglich Video-Suchmaschinen durch die Untersuchung ihres Umfangs an gefundene Videos von Internetseiten mit europäischen Videoinhalten.
Das Verfahren ist einfach:
- Ein Video auswählen, wonach man dann sucht.
- Das Video mit einer Suchmaschine suchen.
- Eine Aufzeichnung machen, wenn das Video gefunden wurde.
- Schritte 1 bis 3 für noch mehr Videos und auf mehr Video-Suchmaschinen wiederholen.
Fünf Industrie-führende Video-Suchmaschinen wurden mit insgesamt 1.000 verschiedenen und online-abspielbaren Videos bewertet. Diese Videos bilden eine Auswahl von 100 Internetseiten, die wiederum aus den Listen der oft-frequentierten Websites von Alexa gewählt wurden (http://www.alexa.com). Die Liste der 100 Seiten besteht aus den 20 Internetseiten mit Videoinhalten mit dem höchsten Verkehr in den 5 größten europäischen Märkten (Großbritannien, Deutschland, Frankreich, Italien und Spanien), entsprechend der Alexa-Klassifizierung vom 22. Januar 2009. Die Top 20 Internetseiten in jedem Land, die eine angemessene Anzahl von Videos hatten und für die Studie geeignet waren, wurden für die Untersuchung ausgewählt.
Danach wurden für die Studie 10 bezeichnende Videos von jeder Seite gewählt und jede Suchmaschine wurde nach jedem Video abgefragt. Wenn eine Suchmaschine mindestens 5 der 10 bezeichnenden Videos fand, wurde die Seite erfolgreich erfasst. Da man den Test als eine Messung des Umfangs konzipierte, musste die Suchmaschine das genau gleiche Video von der Originalseite zurückgeben, um gezählt zu werden. Jede Suchanfrage wurde außerdem auf allen Suchmaschinen und zur gleichen Zeit ausgeführt und bewertet, bevor man zur nächsten Anfrage weiterging. So konnte man sicher sein, dass keine Suchmaschine mehr Zeit als die anderen hatte, ein Video aufzunehmen. Die Anfragen wurden zwischen dem 26. Januar 2009 und 16. Februar 2009 ausgeführt.