A Anthropic lançou recentemente atualizações importantes em seu console, oferecendo aos desenvolvedores novos recursos para otimização de prompts e gerenciamento de exemplos. Essa atualização ajudará os desenvolvedores a aplicar mais facilmente as melhores práticas de engenharia de prompts, criando aplicativos de IA mais confiáveis.
A qualidade do prompt afeta diretamente a saída do modelo de IA. No entanto, as melhores práticas para prompts variam entre diferentes plataformas de modelos, e o processo de otimização costuma ser demorado e trabalhoso. Para solucionar esse problema, a Anthropic lançou um otimizador de prompts que aplica automaticamente técnicas de engenharia avançadas para aprimorar prompts existentes, sendo especialmente útil para otimizar prompts escritos para outros modelos de IA ou prompts escritos manualmente.
Especificamente, o otimizador aprimora a eficácia dos prompts por meio de cinco métodos: primeiro, introduz o raciocínio em cadeia, permitindo que o Claude pense sistematicamente sobre o problema antes de responder; segundo, converte exemplos para o formato XML, melhorando a clareza; terceiro, enriquece os exemplos existentes com raciocínio em cadeia que se adapta à nova estrutura; quarto, reescreve os prompts para otimizar a estrutura e corrigir erros gramaticais e ortográficos; e por último, pré-preenche informações do Assistente para orientar o comportamento e o formato de saída do Claude.
Dados de teste mostraram que este sistema de otimização aumentou a precisão em 30% em testes de classificação de múltiplas etiquetas e atingiu 100% de precisão na contagem de palavras em tarefas de resumo de texto. Os usuários também podem fornecer feedback sobre os resultados da otimização para melhorar ainda mais a eficácia dos prompts.
Em relação ao gerenciamento de exemplos, os desenvolvedores agora podem gerenciar exemplos em formato estruturado diretamente na área de trabalho. O sistema permite adicionar exemplos claros de pares de entrada/saída e editar exemplos existentes para melhorar a qualidade da resposta. Para prompts sem exemplos, o Claude também pode gerar automaticamente rascunhos de entrada e saída de exemplos sintéticos, simplificando todo o processo.
A renomada empresa de tecnologia Kapa.ai já utilizou este otimizador para migrar com sucesso vários fluxos de trabalho de IA essenciais para a plataforma Claude. O cofundador da empresa, Finn Bauer, afirmou: "O otimizador de prompts da Anthropic simplificou nossa migração para o Claude 3.5 Sonnet, ajudando-nos a entrar em produção mais rapidamente."
Atualmente, o otimizador de prompts, o gerenciamento de exemplos e o recurso de saída ideal estão disponíveis para todos os usuários do Anthropic Console. Este sistema não apenas melhora a precisão, mas também garante a consistência do formato de saída, melhorando significativamente a capacidade do Claude de lidar com tarefas complexas. Os desenvolvedores podem encontrar mais informações sobre como usar o Claude para melhorar e avaliar prompts na documentação oficial da Anthropic.
Referências: https://www.anthropic.com/news/prompt-improver