Le retour qui a coûté deux fois
- Leçon 1
- 25 min
- Module 1 : Voir est un problème d'affaires
Où nous en sommes
Dans le cours d'apprentissage automatique, chaque exemple était une ligne dans un tableau. L'entrepôt des retours de Larkfield a plutôt des photos : 600 articles retournés par jour, vérifiés à l'œil. Dans cette leçon, nous commençons par un carton d'œufs au magasin. Puis nous examinons un paquet de bougies qui a coûté deux fois à Larkfield, et le coût de chaque type d'erreur.
Leçon 1 sur 30 · IA de vision : voir, compter et inspecterLe retour qui a coûté deux fois
1. Voir est un problème d'affaires
2. Références de base et classificateurs préentraînés
3. Plongements, CLIP et peu d'étiquettes
4. Détecter et compter
5. Segmenter
6. Inspecter pour trouver les défauts
7. Apparier, chercher et décrire
8. Exploiter la vision en production
Ce que vous saurez faire
Calculez le coût des deux erreurs possibles lors d’une vérification des retours. Puis transformez le souhait « utiliser l’IA sur les photos » en problème avec une sortie, une caméra, un coût et une solution de repli.
Avant de commencerCe qu’il faut savoir et avoir sous la main
Ce que vous devez savoir
- Ce que sont un modèle, une étiquette et une prédiction. Pour un rappel, lisez L’apprentissage supervisé dans Apprentissage automatique : du problème à un modèle fiable.
- Connaître la précision et le rappel présentés dans Les métriques de classification aide, mais n’est pas obligatoire. Cette leçon explique la seule idée dont elle a besoin.
Ce qu’il vous faut sur votre ordinateur
Rien. Cette leçon ne contient pas de code. Vous ouvrirez les images du cours dans un carnet (notebook) Jupyter dans Découvrir les images de Larkfield, la dernière leçon de ce module.
Un carton d’œufs au magasin
Section intitulée « Un carton d’œufs au magasin »Vous achetez un carton d’œufs. Avant de payer, vous ouvrez le carton et regardez chaque œuf pendant une seconde. La plupart du temps, tous les œufs sont intacts. Parfois, l’un d’eux est fissuré.
Vous pouvez faire deux erreurs. Vous pouvez manquer une fissure, rapporter le carton chez vous et trouver un œuf cassé dans le réfrigérateur. Ou vous pouvez remettre un bon carton parce qu’une marque sur une coquille ressemblait à une fissure. La première erreur vous coûte un œuf et du nettoyage. La deuxième ne vous coûte presque rien : vous prenez un autre carton.
Imaginez maintenant que votre travail consiste à vérifier des œufs toute la journée. Vous vérifiez 600 cartons par jour. Un coup d’œil rapide manque les petites fissures. Une vérification attentive les trouve, mais prend une minute complète. Vous avez le temps de faire seulement 100 vérifications attentives. Quels cartons les recevront? Cette question résume tout le problème de cette leçon et d’une grande partie du cours.
Le paquet qui est revenu
Section intitulée « Le paquet qui est revenu »Larkfield est le magasin en ligne de produits pour la maison et le jardin que vous connaissez peut-être d’autres cours. Dans ce cours, Larkfield vend des produits à partir de photos et vérifie les articles retournés dans son entrepôt des retours. Hamid dirige l’équipe de l’entrepôt. Chaque jour, environ 600 articles retournés arrivent.
Pour chaque article, l’équipe prend une décision. Elle remet un bon article en vente comme neuf. Elle envoie un article endommagé au magasin de liquidation de Larkfield, qui vend des articles d’occasion à prix bien réduit. Aujourd’hui, l’équipe décide à l’œil, avec un coup d’œil rapide pendant qu’elle remballe l’article.
Voici une histoire utilisée dans le cours, avec de vraies photos. Un client a retourné un paquet de quatre lampions (bougies chauffe-plat) en écrivant « pas besoin ». L’équipe a regardé le paquet, n’a rien vu d’anormal et l’a remis en vente comme neuf. La cliente suivante a ouvert le paquet et trouvé une bougie à laquelle il manquait un morceau de cire. Elle a porté plainte, et Larkfield l’a remboursée. Le même paquet a coûté deux fois à Larkfield : à son retour, puis à sa revente.

Description textuelle du diagramme
La figure comporte trois panneaux. Le panneau de gauche montre un bon paquet : quatre lampions ronds sur un tissu foncé, vus du dessus. Chacun a une mèche au centre. Le panneau du centre montre un paquet endommagé, photographié de la même façon. Un cadre rouge indique la bougie en bas à droite. Le panneau de droite montre l’intérieur du cadre rouge agrandi quatre fois. Vous voyez maintenant un petit creux gris dans la cire, à gauche de la mèche : il manque un morceau de cire. Sur la photo du centre, à sa taille normale, le creux passe facilement inaperçu.
Pourquoi un coup d’œil rapide ne suffit pas
Section intitulée « Pourquoi un coup d’œil rapide ne suffit pas »Regardez la photo du centre pendant une seconde, comme le ferait une personne occupée. Le dommage couvre 208 des 93 120 pixels de la photo : environ 1 pixel sur 450. (Un pixel est un petit point de couleur. Une photo en est une grille. Les images sont des nombres les examine de près.) Dès que vous savez où regarder, vous voyez le dommage. Sinon, un coup d’œil rapide le manque.
C’est vrai pour la plupart des dommages sur les retours. Dans les photos des retours du cours, les dommages les plus courants sont un coin bosselé du contenant métallique ou une tache d’une autre couleur. Les autres sont de la saleté sur la cire, de la cire manquante ou fondue, et une mèche pliée. La plupart sont petits. L’équipe de Hamid peut les trouver avec une vérification attentive, mais celle-ci prend environ une minute. L’équipe a le temps de faire 100 vérifications attentives par jour, pas 600.
Deux erreurs et le coût de chacune
Section intitulée « Deux erreurs et le coût de chacune »Une décision concernant un article retourné peut être mauvaise de deux façons. Omar, le gestionnaire de produit de Larkfield, pose la question utile : « Combien chaque erreur nous coûte-t-elle? »
Description textuelle du diagramme
Le diagramme commence à gauche par un lampion retourné. Une flèche mène à une personne qui le regarde. Une vérification attentive prend 1 minute et coûte 0,50 $ US. L’équipe a le temps de faire 100 vérifications par jour. Une deuxième flèche mène à une grille de quatre résultats possibles. Les colonnes indiquent si l’article est vraiment bon ou endommagé. Les lignes indiquent si l’équipe le vend comme neuf ou l’envoie au magasin de liquidation. Vendre un bon article comme neuf est correct et ne coûte rien. Vendre un article endommagé comme neuf est une erreur : une plainte qui coûte 45 $ US. Cela comprend un remboursement de 28, des frais de retour de 9 et 8 pour traiter la plainte. Envoyer un bon article au magasin de liquidation est l’autre erreur : il perd son prix moyen de 28 $ US. Envoyer un article endommagé au magasin de liquidation est correct et ne coûte rien. Les deux erreurs ont une bordure épaisse.
Le cours utilise les mêmes coûts dans chaque leçon. Ce sont des hypothèses : des nombres réalistes que nous avons choisis, pas des mesures. Vous pouvez les changer pour votre propre travail.
| Ce qui arrive | Coût (dollars US) | Pourquoi |
|---|---|---|
| Un article endommagé est vendu comme neuf | 45 | Remboursement de 28 + frais de retour de 9 + traitement de la plainte de 8 |
| Un bon article est envoyé au magasin de liquidation | 28 | Son prix moyen : au magasin de liquidation, il perd sa valeur |
| Une personne vérifie attentivement un article | 0,50 | 1 minute à 30 $ US l’heure |
| L’équipe de Hamid | 100 vérifications par jour | Pour environ 600 retours par jour |
La dernière ligne est le budget de révision de Hamid : le nombre de vérifications attentives que son équipe peut faire par jour.
Remarquez que les deux erreurs n’ont pas le même coût. Vendre un article endommagé coûte plus cher que perdre un bon article. Une plainte ajoute au remboursement les frais de retour et le temps d’une personne. Une bonne règle de décision ne traite donc pas les deux erreurs de la même façon. Elle accepte d’envoyer quelques bons articles de plus au magasin de liquidation pour éviter une plainte, mais pas beaucoup plus.
Un petit calcul : une journée à l’entrepôt
Section intitulée « Un petit calcul : une journée à l’entrepôt »Combien d’articles endommagés arrivent chaque jour? Dans les photos de test des retours du cours, 18 articles sur 218 sont endommagés : 8,3 %. À 600 retours par jour, cela donne 600 × 18 ÷ 218 = 49,54 articles endommagés par jour. (Une fraction d’article n’est pas une erreur : c’est une moyenne sur plusieurs jours.) Les 550,46 autres articles sont bons.
Calculez maintenant le coût de quatre façons de gérer l’entrepôt. Chaque ligne utilise seulement les nombres ci-dessus. Les résultats sont arrondis à une décimale.
| Comment l’équipe de Hamid décide | Le calcul | Coût par jour (dollars US) |
|---|---|---|
| Aucune vérification attentive : tout est remis en vente | 49,54 articles endommagés vendus × 45 | 2 229,4 |
| 100 vérifications attentives par jour, sur des articles choisis au hasard | 100 vérifications trouvent 49,54 × 100 ÷ 600 = 8,26 articles endommagés. Les 41,28 autres sont vendus : 41,28 × 45 + 100 × 0,50 | 1 907,8 |
| Tout va au magasin de liquidation, par prudence | 550,46 bons articles perdus × 28 | 15 412,8 |
| Une aide parfaite : elle envoie seulement les 49,54 articles endommagés à une personne, qui confirme leur état | 49,54 × 0,50 | 24,8 |
Deux résultats ressortent. D’abord, les vérifications au hasard économisent seulement environ 322 $ US par jour. Elles utilisent tout le budget, mais cinq vérifications sur six portent sur de bons articles. Ensuite, l’aide parfaite coûte seulement 24,8 $ US par jour, presque 90 fois moins que sans vérification. L’économie ne vient pas du nombre d’articles vérifiés. Elle vient du choix des bons articles à vérifier.
Description textuelle du graphique
Un diagramme à trois colonnes, sur un axe allant de 0 à 2 500 $ US par jour. Sans vérification attentive, le coût est de 2 229,4 $ US par jour. Cent vérifications attentives sur des articles choisis au hasard coûtent 1 907,8. Une aide parfaite, qui envoie seulement les articles endommagés à une personne, coûte 24,8. La troisième colonne est si courte qu’elle disparaît presque.
Ce graphique présente les premières lignes du tableau comparatif du cours. Ce tableau compare toutes les méthodes sur les mêmes photos, de la même façon. Vous l’ouvrirez dans Découvrir les images de Larkfield. Chaque méthode que vous construirez plus tard se situe entre l’aide parfaite et l’absence de vérification. Sa position montre ce qu’elle vaut pour Hamid.
Pourquoi « utiliser l’IA sur les photos » n’est pas encore un plan
Section intitulée « Pourquoi « utiliser l’IA sur les photos » n’est pas encore un plan »Tomás, l’ingénieur en IA de Larkfield, a une réponse rapide : « Nous photographions chaque retour. Utilisons l’IA sur les photos. » Il a raison : une caméra et un modèle peuvent aider. Un modèle peut regarder les 600 photos, et il ne se fatigue pas. Mais sa phrase est un souhait, pas un plan. Personne ne peut le construire, le mesurer ou dire combien il coûtera.
Priya, la scientifique des données de Larkfield, pose quatre questions avant d’écrire du code :
| Partie | La question | Pour les retours de Hamid |
|---|---|---|
| Sortie | Que doit dire exactement le système pour chaque photo? | Une de trois réponses : accepter (vendre comme neuf), vérifier (une personne regarde), rejeter (magasin de liquidation) |
| Caméra | Comment les photos sont-elles prises? | Une caméra fixe au-dessus d’une table, le même éclairage chaque jour, une photo par paquet |
| Coût | Combien coûte chaque erreur? | 45 $ US pour un article endommagé vendu, 28 pour un bon article perdu, 0,50 pour une vérification |
| Solution de repli | Qu’arrive-t-il quand le système hésite ou tombe en panne? | Une personne vérifie : au plus 100 articles par jour. Si le système s’arrête, l’équipe vérifie à la main comme aujourd’hui |
Le souhait devient maintenant un problème : « Pour chaque paquet retourné, prenez une photo avec la caméra fixe. Dites accepter, vérifier ou rejeter. Envoyez au plus 100 articles par jour à une personne. Réduisez au minimum le coût des deux erreurs et des vérifications. Si le système hésite ou s’arrête, une personne décide. »
Chaque partie compte. Sans la sortie, deux personnes construisent deux systèmes différents. Sans caméra fixe, un modèle entraîné sous un éclairage échoue sous un autre, comme dans Les images sont des nombres. Sans le coût, personne ne peut dire si un modèle est assez bon. Et sans la solution de repli, une mauvaise journée du système devient 600 mauvaises décisions.
Tous les problèmes n’exigent pas une caméra et un modèle
Section intitulée « Tous les problèmes n’exigent pas une caméra et un modèle »Parfois, la réponse la moins chère n’est pas un modèle. Un code-barres indique quel produit se trouve dans un carton, sans erreur. Un sceau sur le paquet montre que personne ne l’a ouvert. Un meilleur éclairage à la table d’emballage peut aider les personnes plus que n’importe quel modèle. Le cours compare chaque méthode à ces réponses simples, et le module 7 y revient.
Exercice guidé : calculer le coût d’une journée
Section intitulée « Exercice guidé : calculer le coût d’une journée »Vous pouvez faire cet exercice avec un crayon ou une calculatrice.
- Notez les coûts : 45 $ US pour un article endommagé vendu, 28 pour un bon article perdu, 0,50 pour une vérification.
- Notez la journée : 600 retours, dont 49,54 endommagés.
- Calculez le coût d’une aide qui envoie exactement 100 articles par jour à une personne. Parmi ces 100 articles, 40 sont endommagés.
- Comptez les articles endommagés que l’aide manque. Ils sont vendus comme neufs.
- Additionnez le coût de ces articles vendus et celui des 100 vérifications.
- Comparez votre total aux vérifications au hasard (1 907,8) et à l’aide parfaite (24,8).
Afficher la réponse
L’aide manque 49,54 − 40 = 9,54 articles endommagés, et chacun coûte 45 $ US. Le coût est donc de 9,54 × 45 + 100 × 0,50 = 429,3 + 50 = 479,3 $ US par jour. Ici, la personne vérifie chaque article envoyé par l’aide. Aucun bon article ne va donc au magasin de liquidation par erreur.
C’est 1 428,5 $ US de moins par jour que les vérifications au hasard, avec les mêmes 100 vérifications. L’aide n’a ajouté aucune personne. Elle a seulement mieux choisi les articles à vérifier.
À vous de jouer : une équipe plus petite
Section intitulée « À vous de jouer : une équipe plus petite »Changez une chose. Deux personnes de l’équipe de Hamid changent de poste. L’équipe peut maintenant faire seulement 50 vérifications attentives par jour. Avant de calculer, faites une prédiction : le coût des vérifications au hasard augmente-t-il un peu ou beaucoup? Puis calculez-le.
Afficher la réponse
Cinquante vérifications au hasard trouvent 49,54 × 50 ÷ 600 = 4,13 articles endommagés. Les 45,41 autres sont vendus : 45,41 × 45 = 2 043,6 $ US. Les vérifications coûtent 50 × 0,50 = 25. Le total est de 2 068,6 $ US par jour.
C’est seulement 160,8 $ US de plus qu’avec 100 vérifications au hasard, car celles-ci étaient déjà peu efficaces. Un budget plus petit fait beaucoup plus mal quand les vérifications sont bien choisies. Une bonne aide doit alors réserver les 50 vérifications aux articles les plus susceptibles d’être endommagés.
Erreur courante
Un modèle qui a raison 91,7 % du temps
Symptôme : Tomás présente un premier modèle. « Il a raison sur 200 des 218 photos de test : 91,7 %. » Cela semble bon, et le nombre ne paraît pas incorrect.
Cause : ce modèle dit « bon » pour chaque photo. Les photos de test contiennent 200 bons articles et 18 articles endommagés. Répondre « toujours bon » donne donc raison 200 fois. Le modèle ne trouve aucun article endommagé. Pour Hamid, cela revient exactement à ne rien vérifier : 2 229,4 $ US par jour. Quand un type de réponse est rare, l’exactitude, la proportion de bonnes réponses, ne dit presque rien. Le cours d’apprentissage automatique montrait le même piège dans Les métriques de classification.
Correction : jugez chaque méthode selon ce que Hamid paie. C’est le coût par jour des deux erreurs et des vérifications, avec un budget de 100 vérifications. Comptez aussi combien d’articles endommagés elle trouve. Cette proportion des articles endommagés est le rappel.
Conséquence pour le travail en IA : une exactitude élevée sur des dommages rares peut cacher un modèle qui ne trouve rien. Une équipe qui lui fait confiance livre un système qui coûte autant que l’absence de système. Elle le découvre seulement grâce aux plaintes.
Les études de cas à la fin du cours
Section intitulée « Les études de cas à la fin du cours »Larkfield garde les mêmes problèmes en vue pendant que vous apprenez chaque méthode. Le travail réel comporte d’autres images et d’autres pièges. Le cours se termine donc par trois études de cas sur des images réelles et publiques. Chacune part des fichiers bruts d’un jeu de données pour arriver à une recommandation.
Études de cas de ce cours
À la fin du cours, vous appliquez ce que vous avez appris à un projet réaliste, des données jusqu’à la recommandation. Terminez-en au moins une pour obtenir le certificat; les autres sont facultatives.
- Inspection visuelle avec peu de défautsInspectez des pièces industrielles d'un jeu d'inspection ouvert : comparez un classificateur supervisé, PatchCore et une requête CLIP, et choisissez les seuils à partir d'un budget d'inspection.
- Classer des produits et des animaux à partir de photosClassification fine sur des photos ouvertes : comparez une référence de base par histogramme, CLIP en zéro exemple, une sonde linéaire et le réglage fin selon le nombre d'images étiquetées par classe, avec la pire classe.
- Compter et détecter dans des scènes encombréesDétectez et comptez des objets sur des photos ouvertes encombrées : comparez deux détecteurs, une méthode de densité et un modèle vision-langage sur l'erreur de comptage selon l'encombrement.
Lisez la liste comme une carte du parcours du cours. Les études de cas utilisent tout le cours. La plupart des apprenants les commencent donc après le module 8.
Vérification des connaissances
Section intitulée « Vérification des connaissances »Vérifiez votre compréhension
Expliquez pourquoi « utiliser l'IA sur les photos » n'est pas encore un plan pour les retours de Hamid. Reformulez avec une sortie, une caméra, un coût et une solution de repli.
Afficher la réponse
La phrase ne précise pas ce que le système doit répondre ni comment prendre les photos. Elle ne précise pas le coût d’une erreur, ni ce qui arrive quand le système hésite. Personne ne peut donc le construire ou le mesurer, et on ne peut pas comparer deux méthodes. Voici une reformulation : « Pour chaque paquet retourné, prenez une photo avec la caméra fixe et le même éclairage (caméra). Indiquez accepté, à vérifier ou rejeté (sortie). Vendre un article endommagé coûte 45 $ US, perdre un bon article coûte 28 $ US, et une vérification coûte 0,50 $ US (coût). Envoyez au maximum 100 articles par jour à une personne. Laissez une personne décider quand le système hésite ou s’arrête (solution de repli). »
Votre réponse contient-elle les points principaux de la nôtre ?
Connectez-vous et inscrivez-vous au cours pour enregistrer vos réponses. Chaque vérification compte pour le certificat.
Vérifiez votre compréhension
Prédisez : une aide envoie 100 articles par jour à une personne, dont 40 sont endommagés. Cela coûtera-t-il plus ou moins que 100 vérifications au hasard? Montrez le calcul.
Afficher la réponse
Moins. Sur les 49,54 articles endommagés par jour, l’aide envoie 40 articles à une personne. On vend donc 9,54 articles comme neufs : 9,54 × 45 = 429,3 $ US. Les 100 vérifications coûtent 50 $ US. Le total est de 479,3 $ US par jour. Les mêmes 100 vérifications au hasard ne trouvent qu’environ 8,26 articles endommagés et coûtent 1 907,8 $ US par jour. Le budget reste le même; l’aide choisit simplement mieux les articles à vérifier.
Votre réponse contient-elle les points principaux de la nôtre ?
Connectez-vous et inscrivez-vous au cours pour enregistrer vos réponses. Chaque vérification compte pour le certificat.
Vérifiez votre compréhension
Tomás dit : « Vendre un article endommagé coûte 45 $ US et perdre un bon article coûte seulement 28 $ US. Envoyons donc au magasin de liquidation tout article qui semble un peu inhabituel. » Quel est le problème avec ce plan?
Afficher la réponse
Les deux coûts sont proches : 45 contre 28 $ US. Les nombreuses fausses alertes coûtent donc rapidement plus que les plaintes qu’elles évitent. Environ 550 des 600 articles retournés chaque jour sont en bon état. Tout envoyer au magasin de liquidation coûte 550,46 × 28 = 15 412,8 $ US par jour. C’est presque sept fois le coût sans vérification (2 229,4 $ US). Une bonne règle envoie un article au magasin de liquidation seulement quand la photo montre clairement des dommages. Elle envoie les articles incertains à une personne, dans les limites du budget de 100 vérifications.
Votre réponse contient-elle les points principaux de la nôtre ?
Connectez-vous et inscrivez-vous au cours pour enregistrer vos réponses. Chaque vérification compte pour le certificat.
Récapitulatif
- L’équipe de Hamid décide du sort d’environ 600 articles retournés par jour : vendre comme neufs ou envoyer au magasin de liquidation. Un coup d’œil rapide manque les petits dommages. Une vérification attentive (1 minute, 0,50 $ US) ne permet de vérifier que 100 articles par jour.
- Les deux erreurs ont des coûts différents. Un article endommagé vendu comme neuf coûte 45 $ US. Un bon article envoyé au magasin de liquidation coûte 28 $ US. Ce sont les hypothèses du cours.
- Dans les photos de test, 8,3 % des articles retournés sont endommagés : environ 49,5 par jour. Sans vérification, le coût est de 2 229,4 $ US par jour. Avec 100 vérifications au hasard, il est de 1 907,8 $ US, et avec une aide parfaite, de 24,8 $ US. Vérifier les bons articles permet d’économiser.
- L’exactitude masque les dommages rares : « toujours en bon état » donne la bonne réponse dans 91,7 % des cas, sans rien trouver.
- Un problème de vision demande une sortie, une caméra, un coût et une solution de repli. « Utiliser l’IA sur les photos » ne précise aucun de ces éléments.
Vous pouvez maintenant calculer le coût d’une décision concernant un article retourné. Mais « accepté, à vérifier ou rejeté » n’est qu’un type de réponse qu’un système de vision peut donner. L’entrepôt doit aussi compter les cartons et trouver un produit à partir de la photo d’un client. Vous découvrirez ensuite les cinq types de réponse, avec une photo de Larkfield pour chacun.
Leçon suivante : Cinq types de réponse