-
Petras, V.; Womser-Hacker, C.: Evaluation im Information Retrieval (2023)
0.02
0.016334895 = product of:
0.049004685 = sum of:
0.049004685 = product of:
0.09800937 = sum of:
0.09800937 = weight(_text_:informationssysteme in 808) [ClassicSimilarity], result of:
0.09800937 = score(doc=808,freq=2.0), product of:
0.26235193 = queryWeight, product of:
5.6354303 = idf(docFreq=428, maxDocs=44218)
0.046554018 = queryNorm
0.37357977 = fieldWeight in 808, product of:
1.4142135 = tf(freq=2.0), with freq of:
2.0 = termFreq=2.0
5.6354303 = idf(docFreq=428, maxDocs=44218)
0.046875 = fieldNorm(doc=808)
0.5 = coord(1/2)
0.33333334 = coord(1/3)
- Abstract
- Das Ziel einer Evaluation ist die Überprüfung, ob bzw. in welchem Ausmaß ein Informationssystem die an das System gestellten Anforderungen erfüllt. Informationssysteme können aus verschiedenen Perspektiven evaluiert werden. Für eine ganzheitliche Evaluation (als Synonym wird auch Evaluierung benutzt), die unterschiedliche Qualitätsaspekte betrachtet (z. B. wie gut ein System relevante Dokumente rankt, wie schnell ein System die Suche durchführt, wie die Ergebnispräsentation gestaltet ist oder wie Suchende durch das System geführt werden) und die Erfüllung mehrerer Anforderungen überprüft, empfiehlt es sich, sowohl eine perspektivische als auch methodische Triangulation (d. h. der Einsatz von mehreren Ansätzen zur Qualitätsüberprüfung) vorzunehmen. Im Information Retrieval (IR) konzentriert sich die Evaluation auf die Qualitätseinschätzung der Suchfunktion eines Information-Retrieval-Systems (IRS), wobei oft zwischen systemzentrierter und nutzerzentrierter Evaluation unterschieden wird. Dieses Kapitel setzt den Fokus auf die systemzentrierte Evaluation, während andere Kapitel dieses Handbuchs andere Evaluationsansätze diskutieren (s. Kapitel C 4 Interaktives Information Retrieval, C 7 Cross-Language Information Retrieval und D 1 Information Behavior).
-
Fuhr, N.; Niewelt, B.: ¬Ein Retrievaltest mit automatisch indexierten Dokumenten (1984)
0.01
0.014717328 = product of:
0.044151984 = sum of:
0.044151984 = product of:
0.08830397 = sum of:
0.08830397 = weight(_text_:22 in 262) [ClassicSimilarity], result of:
0.08830397 = score(doc=262,freq=2.0), product of:
0.16302423 = queryWeight, product of:
3.5018296 = idf(docFreq=3622, maxDocs=44218)
0.046554018 = queryNorm
0.5416616 = fieldWeight in 262, product of:
1.4142135 = tf(freq=2.0), with freq of:
2.0 = termFreq=2.0
3.5018296 = idf(docFreq=3622, maxDocs=44218)
0.109375 = fieldNorm(doc=262)
0.5 = coord(1/2)
0.33333334 = coord(1/3)
- Date
- 20.10.2000 12:22:23
-
Sünkler, S.: Prototypische Entwicklung einer Software für die Erfassung und Analyse explorativer Suchen in Verbindung mit Tests zur Retrievaleffektivität (2012)
0.01
0.013612414 = product of:
0.04083724 = sum of:
0.04083724 = product of:
0.08167448 = sum of:
0.08167448 = weight(_text_:informationssysteme in 479) [ClassicSimilarity], result of:
0.08167448 = score(doc=479,freq=2.0), product of:
0.26235193 = queryWeight, product of:
5.6354303 = idf(docFreq=428, maxDocs=44218)
0.046554018 = queryNorm
0.3113165 = fieldWeight in 479, product of:
1.4142135 = tf(freq=2.0), with freq of:
2.0 = termFreq=2.0
5.6354303 = idf(docFreq=428, maxDocs=44218)
0.0390625 = fieldNorm(doc=479)
0.5 = coord(1/2)
0.33333334 = coord(1/3)
- Abstract
- Gegenstand dieser Arbeit ist die Entwicklung eines funktionalen Prototyps einer Webanwendung für die Verknüpfung der Evaluierung von explorativen Suchen in Verbindung mit der Durchführung klassisches Retrievaltests. Als Grundlage für die Programmierung des Prototyps werden benutzerorientierte und systemorientierte Evalulierungsmethoden für Suchmaschinen analysiert und in einem theoretischen Modell zur Untersuchung von Informationssysteme und Suchmaschinen kombiniert. Bei der Gestaltung des Modells und des Prototyps wird gezeigt, wie sich aufgezeichnete Aktionsdaten praktisch für die Suchmaschinenevaluierung verwenden lassen, um auf der einen Seite eine Datengrundlage für Retrievaltests zu gewinnen und andererseits, um für die Auswertung von Relevanzbewertungen auch das implizierte Feedback durch Handlungen der Anwender zu berücksichtigen. Retrievaltests sind das gängige und erprobte Mittel zur Messung der Retrievaleffektiviät von Informationssystemen und Suchmaschinen, verzichten aber auf eine Berücksichtigung des tatsächlichen Nutzerverhaltens. Eine Methode für die Erfassung der Interaktionen von Suchmaschinennutzern sind protokollbasierte Tests, mit denen sich Logdateien über Benutzer einer Anwendung generieren lassen. Die im Rahmen der Arbeit umgesetzte Software bietet einen Ansatz, Retrievaltests auf Basis protokollierter Nutzerdaten in Verbindung mit kontrollierten Suchaufgaben, durchzuführen. Das Ergebnis dieser Arbeit ist ein fertiger funktionaler Prototyp, der in seinem Umfang bereits innerhalb von Suchmaschinenstudien nutzbar ist.
-
Lohmann, H.: KASCADE: Dokumentanreicherung und automatische Inhaltserschließung : Projektbericht und Ergebnisse des Retrievaltests (2000)
0.01
0.0134756025 = product of:
0.040426806 = sum of:
0.040426806 = product of:
0.08085361 = sum of:
0.08085361 = weight(_text_:informationssysteme in 494) [ClassicSimilarity], result of:
0.08085361 = score(doc=494,freq=4.0), product of:
0.26235193 = queryWeight, product of:
5.6354303 = idf(docFreq=428, maxDocs=44218)
0.046554018 = queryNorm
0.3081876 = fieldWeight in 494, product of:
2.0 = tf(freq=4.0), with freq of:
4.0 = termFreq=4.0
5.6354303 = idf(docFreq=428, maxDocs=44218)
0.02734375 = fieldNorm(doc=494)
0.5 = coord(1/2)
0.33333334 = coord(1/3)
- BK
- 06.74 Informationssysteme
- Classification
- 06.74 Informationssysteme
-
Dresel, R.; Hörnig, D.; Kaluza, H.; Peter, A.; Roßmann, A.; Sieber, W.: Evaluation deutscher Web-Suchwerkzeuge : Ein vergleichender Retrievaltest (2001)
0.01
0.008409902 = product of:
0.025229705 = sum of:
0.025229705 = product of:
0.05045941 = sum of:
0.05045941 = weight(_text_:22 in 261) [ClassicSimilarity], result of:
0.05045941 = score(doc=261,freq=2.0), product of:
0.16302423 = queryWeight, product of:
3.5018296 = idf(docFreq=3622, maxDocs=44218)
0.046554018 = queryNorm
0.30952093 = fieldWeight in 261, product of:
1.4142135 = tf(freq=2.0), with freq of:
2.0 = termFreq=2.0
3.5018296 = idf(docFreq=3622, maxDocs=44218)
0.0625 = fieldNorm(doc=261)
0.5 = coord(1/2)
0.33333334 = coord(1/3)
- Abstract
- Die deutschen Suchmaschinen, Abacho, Acoon, Fireball und Lycos sowie die Web-Kataloge Web.de und Yahoo! werden einem Qualitätstest nach relativem Recall, Precision und Availability unterzogen. Die Methoden der Retrievaltests werden vorgestellt. Im Durchschnitt werden bei einem Cut-Off-Wert von 25 ein Recall von rund 22%, eine Precision von knapp 19% und eine Verfügbarkeit von 24% erreicht
-
Reichert, S.; Mayr, P.: Untersuchung von Relevanzeigenschaften in einem kontrollierten Eyetracking-Experiment (2012)
0.01
0.0063074264 = product of:
0.018922279 = sum of:
0.018922279 = product of:
0.037844557 = sum of:
0.037844557 = weight(_text_:22 in 328) [ClassicSimilarity], result of:
0.037844557 = score(doc=328,freq=2.0), product of:
0.16302423 = queryWeight, product of:
3.5018296 = idf(docFreq=3622, maxDocs=44218)
0.046554018 = queryNorm
0.23214069 = fieldWeight in 328, product of:
1.4142135 = tf(freq=2.0), with freq of:
2.0 = termFreq=2.0
3.5018296 = idf(docFreq=3622, maxDocs=44218)
0.046875 = fieldNorm(doc=328)
0.5 = coord(1/2)
0.33333334 = coord(1/3)
- Date
- 22. 7.2012 19:25:54
