Nesta era de rápido desenvolvimento da tecnologia de IA, interagimos diariamente com vários sistemas inteligentes. No entanto, você já se perguntou como esses IAs entendem e respondem às nossas necessidades com tanta precisão? A resposta está em uma tecnologia chave chamada "engenharia de prompts" (Prompt Engineering).

A engenharia de prompts é considerada a "arte da linguagem" do mundo da IA. Através de prompts cuidadosamente elaborados, ela guia a IA para entender melhor as intenções humanas, fornecendo respostas precisas. Mas essa "arte" não é fácil. Requer não apenas um profundo entendimento dos mecanismos de funcionamento da IA, mas também testes e otimizações repetidos para diferentes tarefas, o que representa um obstáculo intransponível para usuários comuns.

QQ20240910-140556.jpg

Para superar esse obstáculo, um grupo de cientistas da Universidade de Pequim e da Baichuan Technology uniram forças para desenvolver uma solução inovadora: o PAS (Prompt Augmentation System). Esse sistema inteligente de aprimoramento de prompts, baseado em modelos de linguagem grandes (LLM), pode gerar prompts de alta qualidade automaticamente, melhorando significativamente a capacidade da IA de entender e responder às necessidades humanas.

As principais vantagens do PAS são:

1. Sua eficiência extrema no uso de dados: apenas 9.000 pontos de dados são necessários para atingir o desempenho ideal, o que representa uma economia significativa de recursos em comparação com os métodos tradicionais.

2. Sua compatibilidade e flexibilidade excepcionais: pode ser integrado perfeitamente a vários modelos de linguagem grandes existentes, sendo aplicável em diversos cenários, desde bate-papos informais até consultas profissionais.

3. Seu desempenho superior em vários testes de referência: alcançou os melhores resultados, com uma melhoria média de 6,09 pontos percentuais, superando todos os métodos existentes.

O funcionamento do PAS pode ser resumido em duas etapas: seleção de prompts de alta qualidade e geração automática de prompts complementares. O sistema seleciona inicialmente prompts de alta qualidade de um grande volume de dados e, em seguida, utiliza técnicas de aprendizado com poucos dados para criar novos prompts. Esses novos prompts também passam por um rigoroso processo de seleção e regeneração para garantir sua qualidade.

QQ20240910-140620.jpg

Para verificar a eficácia do PAS na prática, a equipe de pesquisa realizou uma série de experimentos rigorosos. Eles aplicaram o PAS a vários modelos de linguagem grandes, incluindo GPT-4 e GPT-3.5, e realizaram uma avaliação abrangente em vários testes de referência. Os resultados dos experimentos foram animadores: o PAS melhorou significativamente o desempenho da IA em aspectos como raciocínio lógico, tradução de idiomas e capacidade de resposta a perguntas, alcançando os melhores resultados em todos os testes.

O surgimento do PAS sem dúvida injetou nova vitalidade no desenvolvimento da tecnologia de IA. Ele não apenas reduz significativamente a barreira de entrada para a engenharia de prompts, permitindo que mais usuários comuns utilizem a tecnologia de IA com facilidade, mas também prepara o caminho para uma maior popularização e aprofundamento das aplicações de IA. Com o surgimento contínuo de tecnologias inovadoras como o PAS, temos razões para acreditar que a IA do futuro será mais inteligente, mais compreensiva e trará mais conveniência e surpresas para nossas vidas e trabalho.

Endereço do artigo: https://arxiv.org/pdf/2407.06027

Endereço do projeto: https://github.com/PKU-Baichuan-MLSystemLab