Essayer un autre modèle
Essayer un autre modèle lance vos tests sur un modèle que vous choisissez et sur le modèle de votre agent, côte à côte, sur la même version. Vous voyez si l'agent se comporte aussi bien sur l'autre modèle avant de changer. Rien ne change dans votre agent. La carte se trouve à l'étape 4 du Lab.
Lancer un essai
Il vous faut d'abord des tests : proposez-les à l'étape 3. Choisissez ensuite un modèle sous Modèle à essayer et cliquez sur Voir le prix. La carte Lancer les tests sur deux modèles montre l'estimation et ce que les tests peuvent écrire dans votre production. Lancer l'essai le démarre.
- La liste contient les modèles que Manivox propose à votre organisation, sauf celui que votre agent utilise déjà. Un modèle sur votre propre clé n'est pas proposé. Si votre organisation garde ses données de test sur des modèles internes, un modèle externe ne peut pas être essayé.
- Chaque test tourne une fois sur chaque modèle : un test qui n'échoue que parfois peut donc passer inaperçu.
- Le prix est environ le double d'un lancement normal, car chaque appel de test est passé deux fois.
- Une écriture que vous avez autorisée en production a lieu deux fois. Si le cabinet médical a autorisé son outil de réservation, un test de réservation crée deux rendez-vous.
- Les vrais appels ne sont pas rejoués sur le modèle essayé.
Lire le verdict
| L'écran dit | Ce que cela signifie |
|---|---|
| Prêt à passer au modèle | Rien n'est moins bien sur le modèle essayé. |
| Passage probablement sûr | Quelques points sont moins bien et autant sont mieux, ou rien n'est moins bien mais les tests ont parcouru trop peu du flux, ou les appelants attendraient plus longtemps avant que l'agent parle. |
| Pas prêt à passer au modèle | Trop de points sont moins bien. |
| Pas encore assez d'éléments pour juger | Moins de dix comparaisons ont pu être jugées. |
Sous le verdict, l'écran compte les tests qui se passent mieux, sans changement et moins bien, et ceux qui n'ont pas pu être jugés. Il donne aussi le temps que met chaque modèle à commencer sa réponse et ce que coûte un appel de test sur chacun. Voir le lancement de l'essai ouvre le lancement.
Moins de dix comparaisons
Une comparaison est un test jugé sur les deux modèles. Le verdict en demande au moins dix. Avec huit tests, un essai ne peut pas être jugé, et l'écran dit combien de comparaisons il a eues. Les tests viennent du brief : un petit agent peut donc ne pas atteindre dix.
Changer de modèle, ou adapter l'agent
Passer à, suivi du nom du modèle, ne change pas le modèle tout de suite. Changer de modèle est une modification comme une autre : elle va à l'étape 2 comme correction acceptée, et le Copilot la fait quand vous cliquez sur Appliquer les corrections acceptées. L'application enregistre une nouvelle version brouillon, et Mettre en ligne reste une étape à part.
Un essai ne rend jamais une version prête. Après un changement de modèle, lancez tout l'ensemble des tests sur la nouvelle version. Voir Résultats.
Quand des tests se passent moins bien sur le modèle essayé, Proposer des corrections pour, suivi du nom du modèle, demande au Lab quoi changer pour que l'agent se comporte de la même façon sur ce modèle. Cette lecture démarre dès que vous cliquez, et elle est facturée comme les autres lectures. Ses corrections arrivent à l'étape 2, marquées Pour le modèle à l'essai.