Perplexity

Perplexity ist ein Maß dafür, wie gut ein Sprachmodell den nächsten Textbaustein vorhersagt. Ein niedriger Wert bedeutet, dass das Modell wenig überrascht ist und Texte gut einschätzt, ein hoher Wert das Gegenteil. Forscher nutzen ihn, um Modelle während der Entwicklung zu vergleichen. Er sagt allerdings nichts darüber aus, ob die erzeugten Aussagen inhaltlich richtig oder nützlich sind.