Es gibt zahlreiche Suchmaschinentests, die sich häufig abstrakter Kriterien wie Datenschutz (oft nur anhand der Geschäftsbedingungen geprüft) bedienen oder aber eine Skalierung der Suchergebnisse behaupten, ohne die Suchen und Suchstrategien offenzulegen.
Der Historiker und Archivar Klaus Graf hat in seinem Blog Archivalia einen aktuellen Suchmaschinentest durchgeführt: “Großer Suchmaschinentest 2021: Alternativen zu Google?”
Durchgeführt wurden 18 Suchaufgaben aus dem Bereich Geschichte, davon 3 aus dem eigenen Blog Archivalia und 3 Digitalisate. Die meisten können als Known Item Search eingeordnet werden, wobei er die beste Suchmaschine auch als “Bookmarkersatz” nutzt. Als Treffer wertet er teilweise nur, was auf Platz 1 der Trefferliste steht oder unter den ersten 5 Treffern erscheint. Graf kommt nach der Auswertung zu folgendem Ergebnis.
Google 180
Etools 180
Lukol 155
Startpage 125
Metager 90
Swisscows 90
Searchencrypt 80
Qwant 75
Bing 70
Duckduckgo 50
Erstaunlich ist vor allem das gute Abschneiden der Schweizer Suchmaschine Etools, Lukol und Startpage zehren von der Übernahme der Google Ergebnisse.
Eine Suchmaschine soll die fachlichen Bedürfnisse des Benutzers abdecken. Dass Graf diese operationalisiert und die Ergebnisse offenlegt, ist ein wichtiger Beitrag zur Evaluation von Suchmaschinen. Da es sich um Known Item Searches handelt und die fachliche Ausrichtung sehr speziell ist, kann dieses Ergebnis als wichtige Anregung, aber nicht als repräsentativ betrachtet werden. Evaluation von Suchmaschinen anhand von zusätzlichen Themen- , Fakten- und Produktrecherchen unter Einbeziehung von Recherchestrategien sind allerdings sehr schwierig durchzuführen.