Accuracy

Die Accuracy ist eine Kennzahl, die für die Messung der Qualität von Ergebnissen aus Suchmaschinen verwendet wird. Allgemeiner gesagt handelt es sich um eine Kennzahl aus dem Wissensgebiet des Information Retrievals.

Angenommen, die Gesamtmenge aller Dokumente in einem Korpus setze sich zusammen aus relevanten und nicht relevanten Dokumenten. Für eine bestimmte Suchanfrage q liefert die Suchmaschine nun n relevante und m nicht relevante Dokumente zurück. Anhand der beiden Dimensionen "Im Ergebnis" oder "Nicht im Ergebnis" einerseits sowie "Relevant" oder "Nicht relevant" andererseits lässt sich nun eine Matrix erstellen:

Dabei bedeutet "True" jeweils, dass die Einordnung durch die Suchmaschine korrekt war - das heißt: Ein relevantes Ergebnis wurde zurückgeliefert, ein nicht trelevantes Ergebnis nicht. Die Accuracy wird nun durch die Formel A=(TP+TN)/(TP+TN+FP+FN) ausgedrückt. Das heißt: Die richtig eingeordneten Dokumente werden ins Verhältnis zur Gesamtzahl der Dokumente aus dem Korpus gesetzt.

Kritisch kann man hier anmerken, dass die Accuracy gerade bei sehr großen Dokumentenkorpussen stets ungefähr 1 beträgt, weil die Zahl der nicht zurückgelieferten und nicht relevanten Dokumente (TN) stets wesentlich größer sein wird als die anderen Werte in der Formel.

Weitere Kennzahlen zur Bemessung der Ergebnisqualität von Suchmaschinen sind die Precision, der Recall und der Fallout.