SoSe 2003 - Medok 2 - Spree - Arbeitsaufgaben
Aufgabe 17: Qualität von Internet-Suchmaschinen
Lernziel:
- Sie können die Qualitätskriterien Recall und Precision auf die Evaluierung von Suchergebnissen im Internet anwenden
|
Wie gut sind eigentlich Suchmaschinen? Ist Ihre Leistung messbar?
Die Suchmaschinen sollen in Hinblick auf die Werte: Recall, Precision, und 'distance relevance' verglichen werden. Folgende Testbedingungen gelten:
- Es werden nur die ersten 10 Treffer verglichen
- Für die Summe der tatsächlich relevanten Treffer setzen Sie die Summe der von den drei getesteten Suchmaschinen gefundenen relevanten Dokumente. Treffer, die in mehreren Ergebnissen auftauchen, werden nur einmal gezählt. Wenn es insgesamt mehr als 10 relevante Dokumente unter den ersten 10 gibt, wird 10 zu Grunde gelegt.
- Für die gewichtete Berechnung der 'distance relevance' gilt: relevantes Dokument = 3 Punkte; Dokument mit einem Link zu einem relevanten Dokument = 1 Punkt; nicht relevantes Dokument = 0 Punkte
- Verwenden Sie für die Recherchen die unten aufgeführten Testfragen zu den Themen Produktsuche, Ratgeber und Wissenschaft.
Arbeiten Sie bitte in drei Gruppen und gehen Sie arbeitsteilig vor, da die Relevanzprüfung der Ergebnisse sehr zeitintensiv ist. Sie präsentieren Ihre Ergebnisse am 10. bzw. 11.06.
-
Produktsuche: Gesucht werden Informationen über Kleiderbügel für mehrere Hosen.
- Ratgeber: Rezept für den Cocktail Mai Tai.
- Wissenschaft: Welche Romangattungen gibt es?
- Eine Frage Ihrer Wahl.
Formulieren Sie bitte für alle drei Fragen eine sinnvolle Anfrage. Achtung: die Fragen unterscheiden sich eventuell etwas in Abhängigkeit von den Suchmöglichkeiten der jeweiligen Suchmaschine.
Viel Spaß
Ulrike Spree