KnowEdit ist ein Benchmark, der sich auf die Wissensbearbeitung bei großen Sprachmodellen (LLMs) konzentriert. Er bietet einen umfassenden Bewertungsrahmen zum Testen und Vergleichen verschiedener Wissensbearbeitungsmethoden hinsichtlich ihrer Effektivität bei der Modifizierung des Verhaltens von LLMs in spezifischen Bereichen, wobei gleichzeitig die Gesamtperformance über verschiedene Eingaben hinweg erhalten bleibt. Der KnowEdit-Benchmark umfasst sechs verschiedene Datensätze, die verschiedene Bearbeitungstypen wie Faktenmanipulation, Stimmungsänderung und die Erzeugung von Halluzinationen abdecken. Dieser Benchmark soll Forschern und Entwicklern helfen, Wissensbearbeitungstechniken besser zu verstehen und zu verbessern und die Weiterentwicklung und Anwendung von LLMs voranzutreiben.