2
Ich habe zwei FragenWas ist die durchschnittliche 11pt-Präzisionsmetrik?
1- Was ist die "11pt durchschnittliche Genauigkeit Metrik"?
2- und wie man es beim Informationsabruf benutzt?
Dank
A
Antwort
1
Manchmal frage ich mich, warum Leute solche Fragen stellen, wo, wenn Google sich besser als viele Menschen beantworten kann. Dann führt mich Google zu this Wikipedia Artikel und ich ertrinke ist ein Meer von Formeln und eng definierten Begriffen.
Soweit ich sehen kann 11 Punkt durchschnittliche Genauigkeit ist eine Bewertung, wie gut ein automatisiertes System eine Reihe von Dokumenten kategorisiert hat. Das ist also relevant für das Abrufen von Informationen, da es Ihnen eine Metrik für die Bewertung der Nützlichkeit von (zum Beispiel) einer Suchmaschine gibt.
Also, wenn Sie diesen Artikel verstehen können, gibt es Ihre Antwort. Ansonsten hoffe ich, dass Sie und ich den Vorteil haben, dass uns jemand das erklärt :-)
Viel Glück.
1
Sie sollten das Buch "Einführung in die moderne Information Retrieval" von Salton & McGill konsultieren. Die folgende Online-Referenz hat eine gute Zusammenfassung der Metrik, es ist die Verwendung und ein Algorithmus:
1
Hier ist ein Online-Buch, Introduction to Information Retrieval
und es ist ein Verweis auf 11-Punkt interpoliert Durchschnitt Präzisionsgebrauch, evaluation of ranked retrieval results.
15
Dies kommt hauptsächlich aus dem Buch "Introduction to Information Retrieval" von Christopher D. Manning, Prabhakar Raghavan und Hinrich Schütze.
In der Rangliste abgerufen, haben Sie Präzision und Rückruf. Genauigkeit ist, wie genau das System in den Dokumenten ist, die es zurückgibt (1.0 bedeutet, dass es nur relevante Dokumente zurückgab). Recall ist der Prozentsatz der relevanten Dokumente, die das System gefunden hat (1.0 bedeutet, dass alle gefunden wurden). Sie können also den Rückruf des Systems anpassen, indem Sie immer mehr Dokumente zurücksenden, aber es gibt einen Kompromiss mit Genauigkeit, weil Sie wahrscheinlich mehr Fehler zugeben werden.
Interpolierte Präzision ist, wo Sie eine Rückrufstufe r und für alle Rückrufstufen P (r ')> = P (r) wählen, wobei P (r) die Genauigkeit bei Rang r ist. Es ist die beste Präzision, die Sie erreichen können.
In der interpolierten 11-Punkt-Genauigkeit sehen Sie 11 Abrufstufen (0,0, 0,1, 0,2, ..., 1,0) und finden die interpolierte Genauigkeit an jedem Punkt. Sie können diese Punktzahlen über die verschiedenen Abfragen oder Informationsbedürfnisse hinweg berechnen (wie es das Manning & Schütze-Buch formulierte), um den Score Ihres Systems zu finden.
Die typische Verwendung in der Informationsbeschaffung dient zur Auswertung. Es hilft Ihnen, ein System mit einem anderen zu vergleichen, aber wo es wirklich hilft, Sie vergleichen zu lassen, wie sich Ihr System ändert, während Sie Parameter optimieren. Bedeutet das Ändern dieser Einstellung eine Verbesserung oder Beschädigung meines 11-Pt Interp Avg Prec? Der Vorteil besteht darin, dass sie über alle Informationsbedürfnisse in Ihrer Sammlung hinweg misst, so dass Sie ein "Gesamtbild" erhalten. Aber seien Sie vorsichtig, wenn Sie sich zu sehr auf diese Metriken verlassen, da sie nur so gut sind wie das von Ihnen verwendete Bewertungsset.