Auf der Webist 2026, welche vom 27.-29. Oktober im französischen Angers stattfand, stellte Claire Ponciano ein Paper vor, welches sie gemeinsam mit Jean-Jacques Ponciano und Markus Schaffert verfasst hat. In dem Paper geht es um die Überprüfbarkeit von Wissensgraphen, welche aus großen Sprachmodellen hervorgegangen sind.

Große Sprachmodelle ermöglichen es, Informationen aus unstrukturierten Texten automatisch in Wissensgraphen zu überführen. Allerdings ist oft schwer nachvollziehbar, ob die extrahierten Aussagen tatsächlich durch die ursprünglichen Quellen belegt sind. Hier setzt ECHO-G an: Das Framework verknüpft jede extrahierte Aussage mit ihrer ursprünglichen Textstelle sowie Angaben zu Vertrauenswürdigkeit, Gewissheit und Herkunft. Dadurch wird nachvollziehbar, woher einzelne Informationen stammen und wie sie validiert wurden.

Eine Besonderheit ist das neu eingeführte Konzept der semantischen Idempotenz. Es überprüft, ob ein Wissensgraph die ursprünglichen Informationen eines Dokuments vollständig und ohne das Hinzufügen erfundener Fakten wiedergeben kann. In einem mehrsprachigen Benchmark mit englischen, deutschen und französischen Wikipedia-Artikeln zum Orthohantavirus bewahrte ECHO-G 95,1 Prozent der ursprünglichen Fakten. Die Halluzinationsrate lag bei 5,0 Prozent.

Die gesamte Verarbeitung erfolgt lokal auf eigener Hardware. Das Framework, die zugrunde liegende Ontologie und der Benchmark werden als Open-Source-Projekt bereitgestellt. Mit ECHO-G leisten die Forschenden einen Beitrag zu einer transparenteren und besser überprüfbaren Nutzung von Künstlicher Intelligenz bei der automatisierten Wissensverarbeitung.

Die internationale Konferenz Webist bringt Forschende und Fachleute zusammen, um aktuelle Entwicklungen und Innovationen im Bereich webbasierter Informationssysteme zu diskutieren.