Precision & Recall ... erklärt über eine Süßwaren-Suchmaschine

1. Recall
Precision
M. Sc. Johannes Schildgen
2016-06-09
schildgen@cs.uni-kl.de
und

2. Hariboogle
Suchen

3. Hariboogle
Color-Rado
Suchen

4. Hariboogle
Suchen
Color-Rado
42 Ergebnisse in 0,002 Sekunden
?
?

5. Soll
gefunden
werden
Wurde
gefunden

6. Relevante Gefundene

7. Relevante Gefundene

8. Relevante Gefundene
5 141
4246

9. Relevante Gefundene
5 141
Precision:
|𝑹∩𝑮|
|𝑮|
4246
=
𝟒𝟏
𝟒𝟐
= 0,98 = 98%
„Wie viel % des Gefundenen ist relevant?“

10. Hariboogle
Suche
Precision:
|𝑹∩𝑮|
|𝑮|
= 1 Perfekt!

11. Hariboogle
Color-Rado
Suche
Precision:
|𝑹∩𝑮|
|𝑮|
= 1 Perfekt!

12. Hariboogle
Suche

13. Precision:
|𝑹∩𝑮|
|𝑮|
= 1 Perfekt!
 Es wurde kein Quatsch gefunden
 Es wurde nur sehr wenig gefunden
1 Ergebnis

14. Precision verbessern
• Weniger Quatsch finden (=> Relevance Feedback)
Precision:
|𝑹∩𝑮|
|𝑮|
Hariboogle
Suche
Color-Rado
42 Ergebnisse in 0,002 Sekunden

15. Precision verbessern
• Weniger Quatsch finden (=> Relevance Feedback)
Precision:
|𝑹∩𝑮|
|𝑮|
Hariboogle
Suche
Color-Rado
42 Ergebnisse in 0,002 Sekunden

16. Relevante Gefundene
5 141
Recall:
|𝑹∩𝑮|
|𝑹|
4246
=
𝟒𝟏
𝟒𝟔
= 0,89 = 89%
„Wie viel % der Relevanten wurde gefunden?“

17. Hariboogle
Suche
Recall:
|𝑹∩𝑮|
|𝑹|
= 1 Perfekt!

18. Hariboogle
Color-Rado
Suche
= 1 Perfekt!Recall:
|𝑹∩𝑮|
|𝑹|

19. Hariboogle
Suche
?
?
?
? ?
?
?
?
?
?
?
?
?

20. Recall:
|𝑹∩𝑮|
|𝑹|
= 1 Perfekt!
 Alles Relevante wurde auch gefunden
 Manche Ergebnisse sind totaler Mist!
803214523509235*1012 Milliarden Ergebnisse

21. Recall verbessern
• Mehr Relevantes finden (leicht gesagt)
Recall:
|𝑹∩𝑮|
|𝑹|

22. Zusammenfassung
Precision:
|𝑹∩𝑮|
|𝑮|
Relevante Gefundene

23. Zusammenfassung
Precision:
|𝑹∩𝑮|
|𝑮|
Recall:
|𝑹∩𝑮|
|𝑹|
Relevante Gefundene