ChainForge é um ambiente de programação visual de código aberto focado em engenharia de prompts. Ele permite que você avalie a robustez de prompts e modelos de geração de texto, indo além de simples evidências de casos. Acreditamos que testar vários modelos de linguagem grandes, comparar suas respostas e testar hipóteses sobre eles deve ser não apenas fácil, mas também divertido. O ChainForge fornece um conjunto de ferramentas para avaliar e visualizar a qualidade de prompts (e modelos) com o mínimo de esforço. Em outras palavras, visa simplificar a avaliação de modelos de linguagem grandes. O ChainForge suporta prontamente testes de robustez contra ataques de injeção de prompt, testes de consistência no formato de resposta, envio de muitos prompts parametrizados e exportação para arquivos Excel, verificação da qualidade da resposta para diferentes configurações do mesmo modelo, medição do impacto de diferentes mensagens do sistema na saída do ChatGPT, etc.