GPTKB wird bei ISWC als beste Demo prämiert
Neuigkeit aus der Forschungsgruppe Knowledge-aware Artificial Intelligence vom 27. November 2025
GPTKB wird bei ISWC als beste Demo prämiert
Die Demo zeigt GPTKB, ein neuartiges System zur umfassenden Externalisierung von Faktenwissen großer Sprachmodelle. Ausgangspunkt ist die Beobachtung, dass LLMs zwar beträchtliches internes Faktenwissen besitzen, dessen Analyse jedoch meist auf kleine, vorab definierte Fragestichproben beschränkt bleibt – ein Vorgehen, das zu einem starken Availability Bias führt und nur einen Ausschnitt des tatsächlichen Wissens (oder der Überzeugungen) eines Modells sichtbar macht.
GPTKB löst dieses Problem durch rekursives Abfragen und systematische Konsolidierung der Antworten eines Modells. Damit wird erstmals eine weitgehend vollständige und konstruktive Materialisierung des in einem LLM enthaltenen Faktenwissens möglich.
Als Prototyp entstand eine Wissensbasis mit 101 Millionen Tripeln zu über 2,9 Millionen Entitäten, extrahiert aus GPT-4.1. GPTKB erlaubt die gleichzeitige Analyse von Wissensumfang, Genauigkeit, Verzerrungen, Wissens-Cutoff und Konsistenz eines Modells und schafft damit eine neue Grundlage für Forschung zu LLM-Wissen. Das System ist öffentlich zugänglich unter gptkb.org.
Glückwunsch an das GPTKB-Team!
