TOFU
O conjunto de dados TOFU fornece um benchmark para tarefas de esquecimento fictício em modelos de linguagem grandes.
Produto ComumProdutividadeModelo de linguagemEsquecimento
O conjunto de dados TOFU contém pares de perguntas e respostas gerados artificialmente com base em 200 autores fictícios inexistentes, usados para avaliar o desempenho de esquecimento de modelos de linguagem grandes em tarefas reais. O objetivo desta tarefa é o esquecimento de modelos ajustados finamente em várias proporções de conjuntos de esquecimento. O conjunto de dados utiliza o formato de perguntas e respostas, ideal para modelos de bate-papo populares, como Llama2, Mistral ou Qwen. No entanto, também é aplicável a qualquer outro modelo de linguagem grande. A biblioteca de código correspondente foi escrita para modelos de bate-papo Llama2 e Phi-1.5, mas pode ser facilmente adaptada a outros modelos.
TOFU Situação do Tráfego Mais Recente
Total de Visitas Mensais
474564576
Taxa de Rejeição
36.20%
Média de Páginas por Visita
6.1
Duração Média da Visita
00:06:34