Rejouer des appels et essayer un autre modèle ============================================= Deux questions reviennent après chaque changement : *quel effet aura-t-il sur les conversations que nous avons déjà eues ?* et *cet agent pourrait-il tourner sur un autre modèle d'IA ?* **Rejouer des appels passés** répond à la première en rejouant de vrais appels contre votre brouillon. **Essayer un autre modèle** répond à la seconde en exécutant tous vos tests sur un modèle candidat à côté de votre modèle actuel. Rejouer des appels passés ------------------------- Un rejeu prend de vrais appels traités par votre agent et les rejoue, tour par tour, contre votre brouillon : les mêmes répliques de l'appelant, les mêmes résultats d'outils, vos nouvelles instructions. Là où le brouillon aurait dit quelque chose de sensiblement différent de ce qui a été dit, le rejeu marque une **divergence** ; à partir de ce point, l'appelant de test prend le relais et rejoue le reste de l'appel contre le nouveau brouillon, pour que vous voyiez comment la conversation aurait continué. ### Où le lancer - Depuis le rail **historique des versions** : comparez une version avec celle en production et choisissez **Rejouer des appels passés contre cette version**. - Depuis la **page de détail d'un appel** : rejouer cet appel contre le brouillon actuel. ### Lire un rejeu CatégorieSignification **Inchangé**Le brouillon répond de la même façon que l'agent en production. **Amélioré**Le brouillon a divergé et l'appel rejoué a réussi des règles que l'original échouait. **Régressé**Le brouillon a divergé et l'appel rejoué a échoué des règles que l'original réussissait. **Non concluant**Rien à comparer : l'appel n'avait qu'un seul échange, ou ses prompts enregistrés n'ont pas pu être alignés. Chaque ligne d'appel ouvre la vue avant/après. Sur une ligne régressée, **Transformer en tests** crée un test à partir de cet appel (noms et numéros remplacés), pour que la régression soit attrapée à chaque fois désormais. ![Un rejeu : les quatre catégories et un appel régressé avec Transformer en tests](/docs/agent-lab-replay.png) **Ce qui rend un rejeu honnête.** Les résultats d'outils viennent de l'enregistrement, pas de vos systèmes en production ; un rejeu ne coûte donc que des jetons LLM et ne réserve, n'envoie ni ne met jamais rien à jour. Les données personnelles des appels rejoués sont traitées comme l'appel d'origine : même rétention, et effacer l'appel efface ce qui en a été dérivé. Essayer un autre modèle ----------------------- Un agent écrit pour un modèle d'IA ne se comporte pas automatiquement de la même façon sur un autre : appels d'outils, ton, gestion des interruptions et des dates peuvent tous bouger. **Essayer un autre modèle** dans l'onglet Test exécute **chaque test deux fois** : une fois sur votre modèle actuel en production et une fois sur le candidat choisi, avec les mêmes tests, le même appelant de test et le même réviseur. Seul le modèle derrière l'agent change. ### Comment le lancer 1. Dans l'onglet Test, appuyez sur **Essayer un autre modèle**. La liste montre les modèles proposés à votre organisation ; votre modèle actuel est exclu. 2. Lisez la carte de coût : la ligne de l'agent est tarifée au prix du modèle candidat. 3. Confirmez. La page de résultats porte un badge **Essai de modèle** et nomme les deux modèles. ### Le verdict TitreSignification **Prêt à basculer**Aucun test n'a régressé sur le candidat. Certains ont peut-être progressé. **Pas encore : N tests régressent**Des tests qui réussissent sur votre modèle actuel échouent sur le candidat. Ouvrez-les : les citations montrent ce que le nouveau modèle fait autrement, et **Proposer un correctif** peut adapter les instructions de l'étape. Le Lab mesure ; la bascule reste votre action : changez le modèle de l'agent dans ses paramètres une fois le verdict « Prêt à basculer », puis relancez les tests une dernière fois sur le nouveau brouillon. **Exemple.** Un agent commercial francophone sur un modèle interne a été essayé sur un plus récent : 23 tests sur les deux. Vingt se sont comportés à l'identique, aucun n'a régressé, trois étaient non concluants (l'appelant de test est sorti de son rôle sur une tentative). Verdict : Prêt à basculer. L'équipe a basculé avec des preuves plutôt qu'après une semaine d'écoute d'appels. Où va le texte -------------- Les rejeux et les essais tournent sur les modèles proposés à votre organisation. Si votre organisation est réglée sur **modèles internes uniquement**, les modèles externes ne sont proposés ni comme candidats ni comme réviseurs, et chaque carte de coût indique « Examiné par le modèle interne ; rien ne quitte nos serveurs ». Voir [règles, planification, permissions et confidentialité](https://www.manivox.ai/docs/agent-lab/rules-and-operations#privacy).