Anthropic a récemment lancé d'importantes mises à jour sur sa console, offrant aux développeurs de nouvelles fonctionnalités d'optimisation des invites et de gestion des exemples. Cette mise à niveau permettra aux développeurs d'appliquer plus facilement les meilleures pratiques de l'ingénierie des invites et de créer des applications d'IA plus fiables.

La qualité des invites influence directement les résultats des modèles d'IA. Cependant, les meilleures pratiques pour les invites varient d'une plateforme de modèles à l'autre, et le processus d'optimisation est souvent long et fastidieux. Pour résoudre ce problème, l'optimiseur d'invites d'Anthropic utilise automatiquement des techniques d'ingénierie avancées pour améliorer les invites existantes, particulièrement utile pour optimiser les invites écrites pour d'autres modèles d'IA ou les invites manuscrites.

image.png

Plus précisément, l'optimiseur améliore l'efficacité des invites grâce à cinq méthodes : premièrement, l'introduction du raisonnement en chaîne permet à Claude de réfléchir systématiquement aux problèmes avant de répondre ; deuxièmement, la conversion uniforme des exemples au format XML améliore la clarté ; troisièmement, l'enrichissement des exemples existants avec un raisonnement en chaîne conforme à la nouvelle structure ; quatrièmement, la réécriture des invites pour optimiser la structure et corriger la grammaire et l'orthographe ; et enfin, le préremplissage des informations de l'Assistant pour guider le comportement et le format de sortie de Claude.

Les données de test montrent que ce système d'optimisation a amélioré la précision de 30 % dans les tests de classification multi-étiquettes et a atteint une précision de 100 % du nombre de mots dans les tâches de résumé de texte. Les utilisateurs peuvent également fournir des commentaires sur les résultats de l'optimisation pour améliorer encore l'efficacité des invites.

image.png

En ce qui concerne la gestion des exemples, les développeurs peuvent désormais gérer les exemples dans un format structuré directement dans l'espace de travail. Le système prend en charge l'ajout d'exemples d'appariement entrée/sortie clairs et l'édition d'exemples existants pour améliorer la qualité des réponses. Pour les invites sans exemples, Claude peut également générer automatiquement des brouillons d'entrée et de sortie d'exemples synthétiques, simplifiant ainsi l'ensemble du processus.

La société de technologie renommée Kapa.ai a déjà utilisé cet optimiseur pour migrer avec succès plusieurs workflows d'IA clés vers la plateforme Claude. Finn Bauer, cofondateur de la société, a déclaré : « L'optimiseur d'invites d'Anthropic a simplifié notre migration vers Claude 3.5 Sonnet, nous aidant à atteindre plus rapidement la phase de production. »

Actuellement, l'optimiseur d'invites, la gestion des exemples et la fonctionnalité de sortie idéale sont disponibles pour tous les utilisateurs de la console Anthropic. Ce système améliore non seulement la précision, mais garantit également la cohérence du format de sortie, améliorant considérablement la capacité de Claude à gérer des tâches complexes. Les développeurs peuvent consulter la documentation officielle d'Anthropic pour plus d'informations sur la manière d'utiliser Claude pour améliorer et évaluer les invites.

Références : https://www.anthropic.com/news/prompt-improver