Des preuves plutôt qu'une autoévaluation

Ce que vous saurez faire

Transformez votre inventaire de compétences de « ce que je pense » en « ce que je peux montrer ». Les employeurs font confiance aux preuves. Elles vous montrent aussi exactement quoi apprendre en premier.

Avant de commencerCe qu’il faut savoir et avoir sous la mainEnviron 45 minutes

Ce que vous devez savoir

• Les cinq domaines et les trois niveaux, présentés dans Faire l’inventaire de vos compétences : cinq domaines, pas un seul et Faire l’inventaire de vos compétences : trois niveaux.

Ce qu’il vous faut

• Votre inventaire, sous ## Skills inventory (inventaire de compétences) dans notes.md, tiré de Faire l’inventaire de vos compétences : exercice guidé : votre premier inventaire. Vous le copiez dans cette leçon.
• Votre fiche de domaine, sous ## Domain card (fiche de domaine), tirée de La connaissance du domaine en pratique : exercice guidé : rédiger votre fiche de domaine.
• Pour la tâche 1, un tableur comme Google Sheets, Microsoft Excel ou LibreOffice Calc. Si vous savez utiliser Python ou SQL, vous pouvez les utiliser à la place.
• Faites chaque tâche sans l’aide d’une personne ou d’un assistant d’IA. Le but est de mesurer vos compétences, pas d’obtenir la bonne réponse.

Deux types de preuves

Une autoévaluation est une supposition. Une preuve est quelque chose qu’une autre personne peut vérifier. Il en existe deux types :

1. Une petite tâche diagnostique : une courte tâche que vous faites maintenant, dont la bonne réponse est connue. Elle montre ce que vous pouvez faire aujourd’hui.
2. Des travaux existants : des choses que vous avez déjà créées, comme un rapport, un tableur, un plan de projet, du code ou une présentation. Elles montrent ce que vous avez fait en conditions réelles.

Pour chaque domaine de votre inventaire, il vous faut au moins un de ces deux types. Les tâches diagnostiques sont rapides et équitables. Les travaux existants sont des preuves plus solides, car d’autres personnes les ont utilisés.

Cinq tâches diagnostiques

Faites chaque tâche en 10 à 15 minutes. Écrivez vos réponses dans notes.md sous ## Diagnostics (tâches diagnostiques). Vérifiez vos réponses seulement après avoir terminé les cinq tâches.

Tâche 1 : programmation et outils de données

Copiez ces données dans un tableur. Il s’agit de dix billets de soutien de Larkfield. Chaque ligne contient l’identifiant du billet, sa catégorie, sa priorité et le délai de première réponse en minutes.

id,category,priority,first_reply_minutes
T-2001,returns,2,35
T-2002,delivery,1,12
T-2003,returns,3,140
T-2004,payment,2,48
T-2005,delivery,2,20
T-2006,returns,1,15
T-2007,warranty,3,95
T-2008,delivery,2,30
T-2004,payment,2,48
T-2010,returns,2,60

Si vous collez les données dans un tableur, tout le texte pourrait se retrouver dans la colonne A. Utilisez alors la commande « séparer le texte en colonnes » du tableur, avec une virgule comme séparateur.

1. Un billet apparaît deux fois dans les données. Lequel? Supprimez la deuxième copie.
2. Après cette suppression, combien de billets reste-t-il dans chaque catégorie?
3. Quel est le délai moyen de première réponse? Quelle est la médiane, la valeur du milieu après le tri?

Tâche 2 : mathématiques et statistiques

1. Utilisez vos réponses à la tâche 1. Pourquoi la moyenne et la médiane sont-elles si différentes?
2. Dans la tâche 1, « warranty » (garantie) a le délai de première réponse le plus long. Pouvez-vous dire au responsable du soutien : « Les billets de garantie sont les plus lents »? Pourquoi ou pourquoi pas?
3. La version A de l’assistant a répondu correctement à 45 des 50 questions de test. La version B a répondu correctement à 88 questions sur 100. La version A est-elle meilleure?

Tâche 3 : connaissance du domaine

Expliquez une règle de votre domaine à une personne qui n’y a jamais travaillé, en cinq phrases ou moins. Incluez deux exceptions à cette règle et expliquez pourquoi chacune existe.

Tâche 4 : communication

Ruth, la directrice de Larkfield, a deux minutes. Écrivez-lui un message de cinq phrases ou moins sur l’évaluation de la semaine 5 dans Un projet, plusieurs rôles. Les résultats : 106 des 120 réponses étaient entièrement correctes, et 5 réponses promettaient à tort un remboursement. Dites-lui ce que l’équipe recommande.

Tâche 5 : réalisation de projets

Décrivez un projet terminé avec d’autres personnes, en cinq lignes : l’objectif, votre rôle, un problème rencontré, votre solution et le résultat. Le projet peut venir du travail, de l’université ou d’un groupe communautaire.

Vérifiez vos réponses

Réponses à la tâche 1

1. T-2004 apparaît deux fois dans les données. Après avoir supprimé une copie, il reste 9 billets.
2. returns (retours) : 4, delivery (livraison) : 3, payment (paiement) : 1, warranty (garantie) : 1.
3. La moyenne est de 455 ÷ 9 = 50,6 minutes. La médiane est de 35 minutes. Les valeurs triées sont 12, 15, 20, 30, 35, 48, 60, 95, 140.

Votre niveau : si vos trois réponses sont correctes et que vous n’avez pas eu besoin d’aide, votre niveau est au moins en développement. Si vous avez trouvé le doublon uniquement en lisant chaque ligne, vous êtes au début de ce niveau. Les outils du tableur, comme « supprimer les doublons » et les tableaux croisés dynamiques, le font plus vite et sans risque sur 10 000 lignes.

Réponses à la tâche 2

1. Deux billets lents, à 95 et 140 minutes, font monter la moyenne. La médiane change peu quand quelques valeurs sont très grandes. Pour les délais d’attente, la médiane représente souvent mieux l’expérience d’un client typique.
2. Non. Il n’y a qu’un seul billet de garantie. Un billet lent peut être dû au hasard. Il faut beaucoup plus de billets de garantie avant de tirer une conclusion générale sur ces billets.
3. Ce n’est pas clair. A obtient 90 % et B obtient 88 %, une petite différence. Avec seulement 50 et 100 questions, une si petite différence peut venir du hasard. Une ou deux questions différentes pourraient la modifier. De plus, les questions étaient-elles les mêmes? Sinon, les résultats ne sont pas du tout comparables.

Votre niveau : si vos trois réponses sont correctes, avec les raisons pour les questions 2 et 3, votre niveau est au moins en développement. Les questions 2 et 3 portent sur l’erreur statistique la plus courante en IA : se fier aux différences entre petits échantillons.

Tâche 3 : comment vérifier

Une bonne réponse :

• explique la règle avec des mots simples, sans jargon du domaine, ou en expliquant chaque terme;
• donne deux exceptions réelles;
• explique pourquoi chaque exception existe, par exemple une loi, un risque ou un besoin du client.

Si vous avez fait les trois facilement et pouvez donner cinq autres exceptions, votre connaissance du domaine est probablement démontrée. C’est cette connaissance que les équipes d’IA attendent de vous.

Tâche 4 : exemple de réponse et comment vérifier

Dans notre test de 120 questions réelles, l’assistant a donné une réponse correcte avec la bonne source pour 106 questions. Cinq réponses promettaient à tort un remboursement que la politique ne permet pas. Nous recommandons de ne pas lancer de projet pilote avant de corriger ces erreurs. Nous prévoyons la correction dans environ une semaine, puis nous testerons de nouveau les 120 questions. Nous vous demanderons ensuite de décider si nous pouvons lancer un projet pilote avec 10 agents.

Une bonne réponse commence par le résultat, décrit clairement le problème grave, donne une recommandation et indique la prochaine étape. Elle n’utilise aucun mot technique. Elle ne cache pas les mauvaises nouvelles et n’exagère pas leur gravité.

Tâche 5 : comment vérifier

Une bonne réponse contient les cinq éléments. Votre rôle est clairement le vôtre : « J’ai planifié la formation », pas « nous avons tout fait ». Le problème est réel, et le résultat contient un fait ou un chiffre. Si votre projet réunit tous ces éléments et que vous l’avez dirigé ou coordonné, votre niveau est démontré.

Ajoutez vos travaux existants

Cherchez maintenant des travaux existants pour chaque domaine. Voici des exemples qui comptent :

Domaine	Exemples de travaux existants
Programmation et outils de données	Un tableur utilisé par votre équipe, des requêtes SQL, un script, un projet sur GitHub
Mathématiques et statistiques	Une analyse qui a changé une décision, un rapport contenant des statistiques que vous avez calculées
Connaissance du domaine	Des années dans le métier, des formations que vous avez données, des procédures que vous avez rédigées, une qualification professionnelle
Communication	Rapports, présentations, documentation, articles, matériel de formation
Réalisation de projets	Un projet que vous avez dirigé ou coordonné, avec son résultat

Certains travaux sont confidentiels, comme les documents de clients ou les données d’entreprise. Vous n’avez pas besoin de les montrer. Vous devez les décrire avec exactitude et pouvoir les expliquer en entrevue.

Exemple détaillé : Daniela met à jour son inventaire

Daniela, la comptable, a fait les cinq tâches. Ses résultats :

• Tâche 1 : correcte en 6 minutes, avec un tableau croisé dynamique. En développement, comme elle le pensait.
• Tâche 2 : questions 1 et 3 correctes. Pour la question 2, elle a répondu « oui, warranty est la catégorie la plus lente ». Elle n’a pas tenu compte de la taille de l’échantillon. En développement. Sa lacune est maintenant précise : les statistiques pour comparer des groupes et des échantillons.
• Tâches 3, 4 et 5 : toutes solides.

Elle a ensuite ajouté ses travaux existants. Son inventaire contient maintenant une colonne de preuves :

Domaine	Niveau	Preuves
Programmation et outils de données	En développement	Tâche diagnostique 1. Tableur de clôture mensuelle utilisé par 5 personnes.
Mathématiques et statistiques	En développement	Tâche diagnostique 2. Lacune : échantillons et comparaisons.
Connaissance du domaine	Démontré	7 ans en comptabilité. Forme le nouveau personnel. A rédigé la procédure de vérification des factures.
Communication	Démontré	Rapport mensuel des résultats pour le directeur des finances. Tâche diagnostique 4.
Réalisation de projets	Démontré	A dirigé le passage à un nouveau système comptable : 3 mois, 5 personnes, terminé à temps.

Avant, Daniela avait une impression vague : « Je suis faible dans les aspects techniques. » Maintenant, elle a deux lacunes précises : la programmation au-delà des tableurs et les statistiques pour faire des comparaisons. Une lacune précise peut entrer dans un plan d’étude. Une impression vague ne le peut pas.

Exercice guidé : mettez à jour votre inventaire

1. Copiez votre inventaire de ## Skills inventory sous un nouveau titre : ## Inventory with evidence (inventaire avec preuves).
2. Ajoutez une colonne nommée Evidence (preuves).
3. Pour chaque domaine, écrivez le résultat de la tâche diagnostique et au moins un travail existant.
4. Si les preuves ne justifient pas votre niveau, changez-le.
5. Sous le tableau, décrivez vos deux lacunes les plus importantes dans des phrases précises, comme celles de Daniela.

Vérification : chaque niveau a une preuve à côté. Chaque lacune nomme une compétence précise, comme « comparer des groupes avec de petits échantillons », pas « les maths ».

Erreur courante

Un certificat comme seule preuve

Symptôme : votre colonne de preuves indique « Cours de Python terminé », « Cours d’apprentissage automatique terminé » et « Certificat en science des données ». En entrevue, vous n’avez pas de bonne réponse à la question « Montrez-moi quelque chose que vous avez créé ».

Cause : un certificat montre que vous avez terminé un cours. Il ne montre pas ce que vous pouvez faire. Les employeurs le savent. Un certificat ne garantit jamais un emploi, y compris les certificats de cette plateforme.

Solution : après chaque cours, gardez ce que vous y avez créé : le projet final, avec vos propres modifications. Utilisez-le comme preuve et indiquez le certificat à côté. Dans le module 5, vous apprenez à présenter ce travail.

Vérifiez votre compréhension

Pourquoi faire une tâche diagnostique sans aide, même celle d'un assistant d'IA?

Afficher la réponse

Parce qu’elle sert à mesurer ce que vous pouvez faire aujourd’hui, pour planifier ce qu’il vous faut apprendre. Si un assistant fait la tâche, vous mesurez les compétences de l’assistant. Vous risquez alors de sauter des apprentissages dont vous avez réellement besoin. La lacune apparaît plus tard, en entrevue ou au travail, quand elle coûte plus cher.

Vérifiez votre compréhension

Une personne évalue ses statistiques au niveau « en développement » et réussit toute la tâche 2, avec les raisons. Devrait-elle passer au niveau « démontré »?

Afficher la réponse

Pas encore. La tâche 2 confirme le niveau « en développement » : la personne comprend les idées. Le niveau « démontré » exige des travaux existants. Il faut des statistiques utilisées pour prendre ou vérifier une décision réelle sur laquelle d’autres personnes se sont appuyées. La personne devrait chercher de tels travaux. Si elle n’en a pas, elle peut en créer dans un projet de portfolio.

Récapitulatif

• Une autoévaluation est une supposition. Une preuve est une tâche diagnostique ou un travail existant qu’une autre personne peut vérifier.
• Les petites tâches diagnostiques montrent ce que vous pouvez faire aujourd’hui. Les travaux existants montrent ce que vous avez fait en conditions réelles.
• Une lacune précise, comme « comparer de petits échantillons », peut entrer dans un plan d’étude. Une impression vague ne le peut pas.
• Un certificat montre que vous avez terminé un cours. Gardez ce que vous avez créé comme preuve.

Ensuite, vous utilisez vos preuves pour choisir un rôle cible et une option connexe.

Leçon suivante : Choisir une voie réaliste