Das übergreifende Ziel des Projekts ist, die Software Relevance Assessment Tool (RAT) so weiterzuentwickeln und zu ergänzen, dass sie fächerübergreifend zu einem stabilen, flexiblen und nachhaltigen Werkzeug zur Durchführung von Studien, die sich mit der Sammlung und Analyse von Daten aus Suchmaschinen und weiteren Information-Retrieval-Systemen beschäftigen, wird. Das RAT ist eine Software, die es Forschenden erlaubt, Studien auf der Basis von Ergebnissen (kommerzieller) Suchmaschinen und anderer Information-Retrieval-Systeme durchzuführen. Die Software besteht aus Modulen für (1) das Studiendesign, (2) die automatische Sammlung von Daten aus den Suchsystemen, (3) die Sammlung von Nutzerbewertungen, (4) das Herunterladen/Analysieren der Ergebnisse. Der Ausgangspunkt für die Entwicklung des RAT war die Tatsache, dass Studien zur Retrievaleffektivität einen hohen Anteil manueller Arbeit erfordern; dies sowohl beim Design der Tests, beim Erfassen der Suchergebnisse, bei der Rekrutierung der Juroren und ihrer Bewertungen, sowie bei der Analyse der Studienergebnisse. Mit dem RAT wird eine Lösung entwickelt, die Retrievalstudien auf allen Stufen effektiver und effizienter macht.
Projektwebsite: https://searchstudies.org/research/rat/