KnowEdit
Prueba de referencia de edición de conocimiento, utilizada para evaluar los métodos de edición de conocimiento de los modelos lingüísticos de gran tamaño.
Producto ComúnOtrosEdición de conocimientoModelos lingüísticos de gran tamaño
KnowEdit es una prueba de referencia centrada en la edición de conocimiento de los modelos lingüísticos de gran tamaño (LLM). Ofrece un marco de evaluación integral para probar y comparar la eficacia de diferentes métodos de edición de conocimiento al modificar el comportamiento de los LLM en dominios específicos, manteniendo al mismo tiempo el rendimiento general en diversas entradas. La prueba de referencia KnowEdit incluye seis conjuntos de datos diferentes que abarcan varios tipos de edición, como la manipulación de hechos, la modificación de sentimientos y la generación de alucinaciones. Esta prueba de referencia está diseñada para ayudar a investigadores y desarrolladores a comprender y mejorar las técnicas de edición de conocimiento, impulsando el desarrollo y la aplicación continuos de los LLM.