Precision und Recall

Precision (Genauigkeit) ist der Anteil der gefundenen Dokumente, die relevant sind. Recall (Vollständigkeit) ist der Anteil der relevanten Dokumente, die gefunden wurden. Beide stehen in Spannung: Wer mehr findet, findet meist auch mehr Unpassendes.

Für RAG zählen beide. Fehlt eine wichtige Quelle, fehlt sie auch in der Antwort. Sind unpassende Quellen dabei, kann die Antwort in die Irre gehen. Kennzahlen, die auch die Reihenfolge berücksichtigen, stehen unter Relevanzbewertung.

Weiterlesen

• scikit-learn: Precision-Recall