Dieses von Vectara entwickelte Open-Source-Projekt bewertet die Halluzinationsrate großer Sprachmodelle (LLMs) beim Zusammenfassen kurzer Dokumente. Es verwendet das Hughes Halluzinationsbewertungsmodell von Vectara (HHEM-2.1), um Halluzinationen in der Modell-Ausgabe zu erkennen und ein Ranking zu erstellen. Das Tool ist von großer Bedeutung für die Forschung und Entwicklung zuverlässigerer LLMs und hilft Entwicklern, die Genauigkeit ihrer Modelle zu verstehen und zu verbessern.