Affinage (fine-tuning)

Définition

L’affinage consiste à poursuivre l’entraînement d’un modèle déjà entraîné, sur un jeu d’exemples choisi : questions-réponses métier, documents techniques, style maison. Le modèle intègre ces régularités dans ses paramètres.

C’est plus lourd qu’une recherche documentaire (RAG) : il faut des exemples de qualité, du calcul et un suivi des versions. On y vient quand le RAG et le prompt ne suffisent pas.

En pratique

• Pour apporter des connaissances à jour, le RAG est presque toujours plus simple.
• L’affinage sert plutôt à un format, un ton ou une tâche très spécifique.
• Un petit modèle affiné peut rivaliser avec un grand modèle généraliste sur un corpus donné (cas EDF).

À ne pas confondre

• RAG : le RAG va chercher l’information au moment de la question ; l’affinage modifie le modèle lui-même.

Outils liés