Aller au contenu
English

Menu, agent ou les deux?

  • Leçon 32
  • 40 min
  • Module 8 : Du serveur vocal à l'agent vocal

Où nous en sommes

Nous avons un SVI et un agent vocal, chacun testé séparément, et une méthode équitable pour les évaluer. Omar doit choisir une solution pour la ligne en dehors des heures d'ouverture. Dans cette leçon, nous exécutons le SVI, l'agent et un hybride sur les mêmes appels enregistrés. Nous choisissons avec les chiffres.

Leçon 32 sur 36 · IA de la parole : transcrire, comprendre et parlerMenu, agent ou les deux?
Aperçu du cours

Ce que vous saurez faire

Choisissez une conception pour la ligne téléphonique de Larkfield en dehors des heures d’ouverture : le menu, l’agent vocal ou les deux ensemble. Comparez-les sur les mêmes appels enregistrés. Comptez tous les coûts, même ceux qu’un tableau omet, et rédigez la recommandation avec ses risques.

Carnet JupyterFaites cette leçon dans un carnet JupyterColab · Kaggle · GitHub · en anglais

Le carnet (notebook) Jupyter contient le code, les tâches et les vérifications de cette leçon. Il construit les trois conceptions à partir des deux enregistrements et décompose le coût par appel. Il compte les appels qui se terminent sans réponse et modifie les hypothèses de coût. Il ne nécessite aucun téléchargement de modèle ni aucun compte. Environ 30 minutes.

Le carnet est en anglais. Colab et Kaggle ouvrent votre propre copie. Il faut un compte Google ou Kaggle gratuit. Vous êtes bloqué ? Consultez le carnet de solution.

Avant de commencerCe qu’il faut savoir et avoir sous la mainEnviron 40 minutes

Ce que vous devez savoir

  • Les cinq mesures d’un agent vocal et les appels qui doivent aller à une personne : Les modèles parole-parole et l’évaluation.
  • Ce qu’est le taux de rétention (containment) : la part des appels que le système termine lui-même, sans personne.

Ce qu’il vous faut sur votre ordinateur (seulement pour le parcours local; le carnet n’en a pas besoin)

Testé sur macOS avec Python 3.12. Les commandes Windows (PowerShell) n’ont pas été testées.

Une caisse libre-service avec une personne à proximité

Section intitulée « Une caisse libre-service avec une personne à proximité »

Pensez à un supermarché. Une caisse libre-service est rapide pour un panier d’articles simples. Elle échoue avec un sac de pommes en vrac ou une bouteille de vin, puis appelle un membre du personnel. Une caisse avec personnel traite tout, mais nécessite une personne pour chaque client. La plupart des magasins utilisent les deux : la machine d’abord, puis une personne quand la machine bloque.

Larkfield a les mêmes trois choix pour sa ligne téléphonique en dehors des heures d’ouverture. Elle peut utiliser le menu, l’agent vocal, ou le menu d’abord et l’agent quand le menu bloque. Environ 900 appels par mois arrivent en dehors des heures d’ouverture.

Le problème : deux conceptions, deux tests séparés

Section intitulée « Le problème : deux conceptions, deux tests séparés »

Amira a testé le SVI au module 7. L’équipe du cours a ensuite exécuté l’agent vocal sur les mêmes appels. Tomás dit que l’agent est plus récent, donc forcément meilleur. Amira dit que le menu a réussi plus d’appels de test. Chacun regarde ses propres chiffres.

Omar a besoin d’un seul tableau : les mêmes appels, les mêmes règles, les mêmes coûts. Et il a besoin de la troisième conception que personne n’a encore testée.

Une conception hybride place le menu en premier. Le menu traite ce qu’il peut. Après deux échecs de correspondance avec les mots de l’appelant, l’appel va à l’agent vocal plutôt qu’à une personne. Un appelant qui demande une personne, ou appuie sur 0, obtient toujours une personne immédiatement.

Un flux. Un appel arrive au menu du SVI, avec parole et clavier. Avec un choix du menu, le SVI accomplit la tâche (suivi de commande, heures ou retour), puis l'appel se termine. Avec 0, ou quand l'appelant demande une personne, l'appel va à une personne. Après deux absences de correspondance, l'appel va à l'agent vocal, un LLM avec des outils et les mêmes garde-fous. Si la tâche est terminée, l'appel se termine. Si l'agent ne peut pas aider, l'appel va à une personne.
L'hybride : le menu d'abord; l'agent vocal seulement après deux échecs de correspondance; une personne dès que l'appelant le demande.
Description textuelle du diagramme

Un appel commence au menu du SVI, qui comprend la parole et le clavier. Si l’appelant choisit une option du menu, le SVI accomplit la tâche : suivi de commande, heures d’ouverture ou retour. L’appel se termine ensuite. Si l’appelant appuie sur 0 ou demande une personne, l’appel va à une personne. Après deux échecs de correspondance avec les mots de l’appelant, l’appel va à l’agent vocal. C’est un LLM avec des outils et les mêmes garde-fous. L’agent termine l’appel quand la tâche est accomplie. Quand il ne peut pas aider, il transfère l’appelant à une personne.

Pour comparer les trois, utilisez les mêmes appels de test enregistrés et un seul ensemble de règles :

  • Retenu : l’appel s’est terminé avec la réponse (suivi de commande, heures ou retour lancé), sans mauvaise action ni personne.
  • Vers une personne : l’appel a été transféré.
  • Mauvaises actions : la conception a agi sur une mauvaise intention ou une mauvaise commande.
  • Coût par appel : personnes, mauvaises actions et calcul, selon le tableau des coûts de Grace. Ce sont des hypothèses : 4,00 $ US pour un appel traité par une personne, 15 $ US pour une mauvaise action, 0,002 $ US de calcul du SVI par appel. Le coût du LLM est le coût enregistré de chaque appel de l’agent.

Vous n’avez besoin d’aucun nouveau fichier : speech agent compare était inclus dans l’instantané end-of-m08 de Le pipeline de l’agent vocal.

  1. Dans votre dossier larkspeech, avec l’environnement virtuel actif, exécutez la comparaison :

    Fenêtre de terminal
    speech agent compare
    design calls contained to a person wrong actions mean s US$ a call
    IVR (menu) 60 35% 63% 2 45.1 3.035
    voice agent 60 17% 70% 0 24.3 2.800
    hybrid 60 37% 55% 2 51.9 2.702
    Costs are assumptions (data/costs.json); agent answers and times are recorded (chat-small).

    Elle utilise la réexécution enregistrée du SVI et les appels enregistrés de l’agent. Elle prend donc environ une seconde.

    La réexécution enregistrée du SVI a été créée une seule fois, avec la première version de dialogue.py. C’était avant les dernières modifications du module 7. Dans cette réexécution, deux appels en français (I-046 et I-051) sont allés à une personne pour une mauvaise raison. Le SVI a entendu une demande de parler à une personne, mais l’appelant voulait le suivi de sa commande. Ce sont ses 2 mauvaises actions. Quand nous avons réexécuté les appels avec le projet actuel, Whisper a entendu ces tours de parole différemment. Aucun appel n’avait une mauvaise intention. Pour comparer votre propre SVI, exécutez d’abord speech ivr replay, puis speech agent compare --ivr-records outputs/ivr-replay.jsonl. Lors de notre exécution, le SVI coûtait alors 2,535 $ US par appel et l’hybride 2,202 $ US, avec la même rétention. Le classement avec les abandons, plus loin dans cette leçon, ne change pas.

  2. La commande écrit aussi le tableau dans outputs/designs.jsonl, avec une conception par ligne. Regardez la première ligne :

    Fenêtre de terminal
    head -1 outputs/designs.jsonl
    {"design": "IVR (menu)", "calls": 60, "containment": 0.35, "handover": 0.6333333333333333, "wrong_actions": 2, "mean_seconds": 45.07233333333333, "usd_per_call": 3.0353333333333334}

    Le fichier conserve tous les chiffres. Le tableau les arrondit.

Dans ce tableau, l’hybride gagne : le plus d’appels retenus, le moins d’appels vers une personne et le coût le plus bas. L’agent de Tomás utilisé seul a la pire rétention. Avant qu’Omar décide, Priya vérifie d’où vient chaque chiffre.

Chaque coût par appel est la somme de trois parties, divisée par les 60 appels :

Partie Nombre Coût unitaire Total
Appels vers une personne 38 4,00 $ US 152,00 $ US
Mauvaises actions 2 15,00 $ US 30,00 $ US
Calcul du SVI 60 0,002 $ US 0,12 $ US
Les 60 appels 182,12 $ US

182,12 $ US / 60 = 3,035 $ US par appel. Les 38 appels vers une personne incluent les 2 mauvaises actions, car ces deux actions étaient des transferts (détails ci-dessous). Ces 2 appels entraînent donc un coût pour une personne et pour une mauvaise action. Les personnes représentent 83 % du coût. Les coûts du LLM de l’agent sont encore plus faibles que le calcul du SVI : 0,011 $ US pour les 60 appels. La conception qui gagne sur le coût est donc celle qui envoie le moins d’appels à une personne.

Trois barres horizontales empilées de 60 appels chacune. SVI (menu) : retenus 21, vers une personne 36, sans résolution 1, mauvaises actions 2. Agent vocal : retenus 10, vers une personne 42, sans résolution 8. Hybride : retenus 22, vers une personne 31, sans résolution 5, mauvaises actions 2.
Comment chacun des 60 appels de test enregistrés s'est terminé, pour chaque conception (appels synthétiques de Larkfield). « Sans résolution » désigne un appel terminé sans réponse ni personne.
Description textuelle du diagramme

Chaque barre représente une conception, répartie en 60 appels de test. Le SVI a retenu 21 appels, transféré 36 appels à une personne, fait 2 mauvaises actions et laissé 1 appel sans résolution. L’agent vocal en a retenu 10, transféré 42 à une personne et laissé 8 sans résolution. L’hybride en a retenu 22, transféré 31 à une personne, fait 2 mauvaises actions et laissé 5 sans résolution.

Regardez la partie orange : sans résolution. Ces appels se sont terminés sans réponse ni personne. Dans la réexécution de l’agent, l’appelant enregistré n’avait plus de répliques alors que l’agent posait encore une question. Un véritable appelant raccrocherait ou rappellerait. Le SVI a 1 appel de ce type : l’appelant silencieux de la leçon précédente. L’agent en a 8 (7 sans résolution et 1 qu’il a terminé sans réponse), et l’hybride 5.

Appels sans résolution SVI Agent vocal Hybride
L’appelant a raccroché ou n’avait plus de répliques (compté comme un abandon ci-dessous) 1 7 4
L’agent a terminé l’appel sans réponse 0 1 1
Tous les appels « sans résolution » du graphique 1 8 5

Regardez maintenant l’hybride. Sur les 16 appels transférés par le SVI après deux échecs, l’agent n’en a retenu que 1. Il en a transféré 11 à une personne et laissé 4 sans résolution. L’hybride évite donc 5 transferts, mais 4 de ces 5 appelants n’ont obtenu aucune réponse.

Le coût de la commande compte les personnes, les mauvaises actions et le calcul. Il ne compte pas un appelant qui raccroche. Le tableau des coûts de Grace prévoit un montant pour cela : 8 $ US pour un appelant qui raccroche. C’est une hypothèse : un deuxième appel et un client mécontent. Comptez chaque appel terminé par un abandon à 8 $ US :

Trois barres horizontales empilées du coût par appel. SVI : personnes 2,53, mauvaises actions 0,50, calcul 0,002, total 3,035, plus abandons 0,133. Agent vocal : personnes 2,80, total 2,800, plus abandons 0,933. Hybride : personnes 2,20, mauvaises actions 0,50, calcul 0,002, total 2,702, plus abandons 0,533. Les parties des abandons sont hachurées et portent l'étiquette non inclus dans la commande.
Le coût par appel de chaque conception, décomposé, avec les abandons que la commande ne compte pas (8 $ US chacun, une hypothèse). Avec les abandons : SVI 3,169 $ US, hybride 3,235 $ US, agent 3,734 $ US.
Description textuelle du diagramme

Chaque barre représente le coût par appel d’une conception. Les parties pleines représentent ce que la commande compte : personnes, mauvaises actions et calcul avec le LLM. La partie hachurée représente le coût des abandons, que la commande omet. SVI : personnes 2,533 $ US, mauvaises actions 0,500 $ US, calcul 0,002 $ US, total 3,035 $ US; les abandons ajoutent 0,133 $ US (1 appel). Agent vocal : personnes 2,800 $ US, total 2,800 $ US; les abandons ajoutent 0,933 $ US (7 appels). Hybride : personnes 2,200 $ US, mauvaises actions 0,500 $ US, calcul 0,002 $ US, total 2,702 $ US; les abandons ajoutent 0,533 $ US (4 appels).

Conception $ US par appel (la commande) Abandons $ US par appel avec abandons
SVI (menu) 3,035 1 3,169
Hybride 2,702 4 3,235
Agent vocal 2,800 7 3,734

Le classement change. En comptant les abandons, le SVI est le moins cher, l’hybride est proche et l’agent est le plus cher. Rien n’a changé dans les données : un coût absent du tableau a changé la réponse.

Les mauvaises actions. Les 2 mauvaises actions du SVI sont les deux appels en français où Whisper base a entendu « quelqu’un ». Le SVI a transféré ces appelants à une personne. La commande facture 15 $ US chacun, comme pour un retour lancé par erreur. Un mauvais transfert coûte moins que cela dans la réalité. Le coût du SVI est donc plutôt un peu trop élevé.

Le temps. L’appel moyen de l’agent est le plus court : 24,3 secondes. Mais plusieurs de ses appels sont courts parce qu’il les a transférés tôt. Les appels de l’hybride sont les plus longs, à 51,9 secondes : l’appelant qui atteint l’agent a déjà passé du temps dans le menu. Les deux temps sont aussi calculés différemment. Le temps du SVI vient de sa réexécution, avec la durée réelle de chaque message Piper. Le temps de l’agent est une somme : l’audio de l’appelant, chaque attente, chaque réponse vocale et 4 secondes fixes pour l’accueil. Comparez les temps seulement de façon approximative. Les 45,1 secondes du SVI incluent aussi des essais supplémentaires causés par un bogue connu de la réexécution. Après un appui sur une touche, elle traite le reste de l’enregistrement comme un nouveau tour de parole silencieux. Tester le serveur vocal comme un produit l’explique. Avec la correction, la moyenne du SVI est d’environ 35,8 secondes. Ses réussites et sa rétention ne changent pas.

Les coûts sont des hypothèses, alors testez-les. Modifiez le coût d’une personne et gardez les abandons à 8 $ US :

Coût d’une personne SVI Hybride Agent
3,00 $ US 2,54 2,69 3,03
4,00 $ US 3,17 3,24 3,73
6,00 $ US 4,44 4,34 5,13

L’hybride envoie 5 appels de moins à une personne, mais laisse 3 appelants de plus sans réponse. Les deux coûtent autant quand une personne coûte environ 4,80 $ US par appel. Au-dessus, l’hybride est moins cher. Et la différence de rétention est d’un appel sur 60 : elle reste dans le bruit. Pour 900 appels par mois, le SVI et l’hybride diffèrent d’environ 60 $ US par mois en comptant les abandons. Les appels enregistrés ne permettent pas de départager ces deux conceptions. Seuls des appelants qui réagissent le peuvent.

Dans l’hybride, un appelant atteint l’agent seulement après deux échecs du menu. Cet appelant a déjà attendu et est peut-être déjà mécontent. Chacune des réponses de l’agent arrive ensuite après un silence.

Explorer

L'attente de l'agent, pour un appelant qui arrive du menu

  • Attente de fin de tour : 0,80 s
  • Reconnaissance (Whisper base) : 0,24 s
  • LLM, premiers mots : 1,02 s
  • Voix, premier son : 0,05 s
Attente totale
2,11 s
Par rapport à la cible de 1 s
1,11 s au-dessus

Attente de fin de tour de 0,8 s, Whisper base, avec diffusion en continu : les parties font 2,11 s au total, 1,11 s au-dessus de la cible de 1 s. La plus grande partie est « LLM, premiers mots » (1,02 s). Même sans attente et sans reconnaissance, le LLM et la voix seuls prennent 1,06 s : plus que la cible.

Chaque partie sur les 127 tours enregistrés de l’agent
PartieMédiane90e centilePlageSource
Attente de fin de tour0,80 s0,80 sfixeun réglage
Reconnaissance (Whisper base)0,24 s0,30 sde 0,23 à 1,01 smesuré sur le portable du cours
LLM, premiers mots1,02 s1,49 sde 0,69 à 2,45 senregistré (chat-small)
Voix, premier son0,05 s0,08 sde 0,01 à 0,76 smesuré sur le portable du cours
Le même budget de latence que dans Le pipeline de l'agent vocal : la médiane de chaque partie sur les 127 réponses enregistrées de l'agent (appels synthétiques de Larkfield).
Description textuelle de l’explorateur

Une barre empilée de 0 à 3 secondes, avec une ligne pointillée à la cible de 1 seconde. Avec les réglages initiaux (attente de fin de tour de 0,8 seconde, Whisper base, diffusion en continu activée), les parties totalisent 2,11 secondes : attente de fin de tour 0,80 seconde, reconnaissance 0,24 seconde, premiers mots du LLM 1,02 seconde, premier son de la voix 0,05 seconde. Les réglages les plus rapides de l’explorateur (attente de 0,2 seconde, Whisper tiny, diffusion en continu) donnent 1,38 seconde. La leçon précédente a montré qu’une attente inférieure à 0,7 seconde coupe la parole à davantage d’appelants. Avec une attente de 0,7 seconde et Whisper tiny, la somme est de 1,88 seconde. Les premiers mots du LLM, à 1,02 seconde, dépassent à eux seuls la cible.

Même avec les réglages les plus rapides, l’appelant attend environ 1,4 seconde avant chaque réponse. Avec l’attente qui ne coupe pas la parole aux appelants, 0,7 seconde, c’est environ 1,9 seconde. Le SVI répond après environ 1,05 seconde, parce que ses messages sont créés à l’avance. L’hybride donne donc les réponses les plus lentes aux appelants qui ont déjà eu des difficultés. C’est un risque à tester avec de vrais appelants.

Omar demande une recommandation pour la ligne en dehors des heures d’ouverture. Priya la rédige avec les chiffres, tous tirés des appels synthétiques de Larkfield :

Conception Pour Contre Risque principal
SVI (menu) 39 appels sur 60 réussis; le moins cher avec les abandons (3,169 $ US); répond en environ 1,05 seconde rétention de seulement 35 %; échoue pour 15 appels en français; a raccroché au lieu de transférer un appelant silencieux appelants francophones transférés à une personne ou, pire, laissés sans réponse
Agent vocal 0 mauvaise action; tous les appels exigeant une personne réussis 25 appels sur 60 réussis; 8 appels sans résolution; 2,10 secondes par réponse réponses lentes et erreurs dites à voix haute
Hybride meilleure rétention (37 %) et moins de transferts à une personne (55 %) l’agent retient 1 des 16 appels reçus; 4 appelants laissés sans réponse réponses les plus lentes pour les appelants qui ont déjà eu des difficultés

Recommandation : garder le SVI pour la ligne en dehors des heures d’ouverture et tester l’hybride dans un projet pilote mesuré.

  1. Corrigez d’abord le SVI. Transférez l’appelant silencieux à une personne au lieu de raccrocher. Améliorez la reconnaissance du français, qui cause la plupart des échecs. Accents, bruit et deux langues a mesuré un WER en français de 15,1 % pour Whisper small, contre 23,8 % pour base. Chaque correction aide toutes les conceptions, car l’hybride commence par le menu.
  2. Testez l’hybride dans un projet pilote sur une partie des vrais appels en dehors des heures d’ouverture. Gardez les garde-fous dans le code et transférez à une personne quand l’agent n’a pas de réponse. Calculez les cinq mesures de la leçon précédente, en comptant les abandons.
  3. Décidez à nouveau avec le projet pilote. Les appels enregistrés ne permettent pas de départager le SVI et l’hybride. L’hybride pourrait gagner si une personne coûte plus d’environ 4,80 $ US par appel. Il pourrait aussi gagner si les vrais appelants échouent au menu plus souvent que les appelants enregistrés.

Tomás n’est pas content, mais il accepte la méthode. L’agent a bien réussi là où cela comptait le plus : aucune mauvaise action et une personne pour chaque appelant qui en avait besoin. Il lui faut des appelants capables de répondre à ses questions.

Erreur courante

La ligne la moins chère du tableau

Symptôme : Tomás lit le tableau de la commande. Il écrit « l’hybride économise 0,33 $ US par appel par rapport au SVI : 300 $ US par mois pour 900 appels ». Omar est sur le point de signer.

IVR (menu) 60 35% 63% 2 45.1 3.035
hybrid 60 37% 55% 2 51.9 2.702

Cause : le coût compte les appels transférés à une personne, mais pas ceux qui se terminent sans réponse. Dans l’hybride, l’agent a laissé 4 appelants sans réponse alors que le SVI les avait transférés à une personne. Ces appels sont devenus « gratuits ».

Correction : indiquez comment chaque appel s’est terminé, pas seulement les appels retenus et les transferts. Attribuez un coût à chaque fin, y compris aux abandons. Avec un abandon à 8 $ US, l’hybride coûte 3,235 $ US par appel et le SVI, 3,169 $ US.

Conséquence dans le travail en IA : un système qui échoue d’une nouvelle façon peut sembler moins cher. L’ancien tableau des coûts n’a aucune ligne pour ce nouvel échec. Quand vous ajoutez une conception, vérifiez que chaque fin possible a un coût.

  1. Ouvrez le carnet depuis l’encadré Faites cette leçon dans un carnet Jupyter en haut de cette page.
  2. Exécutez les cellules de préparation et la cellule auxiliaire. La cellule de préparation se termine par Ready: 4 files in larkfield-calls. (prêt : 4 fichiers dans larkfield-calls).
  3. Dans la section 2, exécutez les trois conceptions. Le tableau correspond à celui de la commande, avec une colonne supplémentaire : no end (sans résolution), qui vaut 1, 7 et 4.
  4. Dans la section 3, exécutez la cellule de l’hybride. L’agent reçoit 16 appels : 11 transférés à une personne, 3 sans résolution, 1 que l’agent a terminé sans réponse et 1 avec le suivi de commande.
  5. Dans la section 4, lisez les composantes du coût. Les personnes représentent presque tout le coût.
  6. Dans la section 6, changez le coût d’une personne. À 6 $ US, l’hybride devient le moins cher.

Dans la section 5 du carnet, attribuez à chaque appel sans résolution le coût d’un abandon et trouvez la conception la moins chère. Puis rédigez la recommandation d’Omar en cinq lignes. Donnez la conception, deux chiffres en sa faveur, un chiffre contre elle, son risque principal et ce qui changerait votre avis.

Afficher la réponse
with_hangups = {name: round(table(rows, costs, hangup_cost=costs["caller_hangs_up"])["usd"], 3)
for name, rows in D.items()}
cheapest = min(with_hangups, key=with_hangups.get)
print(with_hangups, "->", cheapest)
{'IVR (menu)': 3.169, 'voice agent': 3.734, 'hybrid': 3.235} -> IVR (menu)

Voici un exemple de bonne recommandation :

  • Conception : le SVI maintenant, avec l’hybride dans un projet pilote mesuré.
  • Pour : il a réussi 39 appels de test sur 60 et reste le moins cher en comptant les abandons (3,169 $ US par appel contre 3,235 $ US pour l’hybride).
  • Contre : il ne retient que 35 % des appels, et 15 de ses 21 échecs concernent des appels en français.
  • Risque principal : des appelants francophones transférés à une personne ou laissés sans réponse : corrigez d’abord le raccrochage pour les appelants silencieux.
  • Ce qui changerait mon avis : un coût d’une personne supérieur à environ 4,80 $ US par appel. Ou un projet pilote avec de vrais appelants où l’hybride retient clairement plus d’appels, sans augmenter les abandons.

Vérifiez votre compréhension

Calculez le coût par appel de l'hybride à partir de ses composantes : 33 appels à une personne à 4 $ US, 2 mauvaises actions à 15 $ US et 0,123 $ US de calcul et de LLM pour les 60 appels. Ajoutez ensuite 4 abandons à 8 $ US.

Afficher la réponse

Personnes : 33 × 4 = 132 $ US. Mauvaises actions : 2 × 15 = 30 $ US. Calcul et LLM : 0,123 $ US. La somme est de 162,123 $ US. Donc, 162,123 $ US / 60 = environ 2,702 $ US par appel, comme l’affiche la commande. Abandons : 4 × 8 = 32 $ US, soit 0,533 $ US par appel. Avec eux, l’hybride coûte environ 3,235 $ US par appel, plus que les 3,169 $ US du SVI.

Vérifiez votre compréhension

L'hybride retient 37 % des appels de test et le SVI, 35 %. L'hybride est-il meilleur pour la rétention?

Afficher la réponse

Ce n’est pas clair. La différence est de 22 appels contre 21 : un appel sur 60. Un appel peut changer avec le prochain enregistrement ou avec une seule erreur de reconnaissance. Et l’hybride obtient cet appel supplémentaire en laissant 4 appelants sans réponse. Pour départager les deux conceptions, il faut plus d’appels ou un projet pilote avec de vrais appelants capables de répondre aux questions de l’agent.

Vérifiez votre compréhension

Pourquoi les appels de l'agent sont-ils les plus courts en moyenne (24,3 secondes), et pourquoi cela ne justifie-t-il pas de le choisir?

Afficher la réponse

Beaucoup d’appels de l’agent se terminent tôt : il a transféré 42 appels sur 60 à une personne, souvent après quelques tours de parole. Un appel court qui se termine par un transfert n’est pas un bon appel pour l’appelant. Les deux durées se calculent aussi différemment. Le temps du SVI vient de sa réexécution. Le temps de l’agent additionne l’audio de l’appelant, les attentes, les réponses vocales et un message d’accueil fixe. Comparez d’abord les résultats et les coûts, puis les durées seulement de façon approximative.

Récapitulatif

  • Un hybride commence par le menu et envoie un appel à l’agent vocal seulement après deux échecs.
  • Sur les 60 appels de test enregistrés : SVI, rétention de 35 %, 3,035 $ US par appel; agent, 17 %, 2,800 $ US; hybride, 37 %, 2,702 $ US. Les coûts sont des hypothèses; les réponses de l’agent sont enregistrées.
  • Le coût de la commande exclut les appels terminés sans réponse. En comptant 8 $ US par abandon : SVI, 3,169 $ US; hybride, 3,235 $ US; agent, 3,734 $ US. Le classement change.
  • Ces appels ne permettent pas de départager le SVI et l’hybride. Un seul appel retenu les sépare, et l’ordre des coûts s’inverse vers 4,80 $ US pour une personne.
  • Larkfield garde le SVI, corrige sa reconnaissance du français et son raccrochage pour les appelants silencieux, puis teste l’hybride avec de vrais appelants.

Vous pouvez maintenant construire une ligne téléphonique, un agent vocal et un hybride, puis choisir entre eux avec des preuves. Mais jusqu’ici, tout fonctionnait sur un portable, un appel à la fois. Ensuite, vous exploiterez la parole comme un service. Vous utiliserez une file d’attente pour les appels enregistrés et un chemin de diffusion en continu pour les appels en direct. Vous calculerez le coût de chacun par heure d’audio.

Leçon suivante : Par lots et en continu