Analyser des verbatims avec l’IA : une méthode de codage vérifiable
Un pourcentage précis peut raconter une histoire fausse si son dénominateur reste caché. Voici un exercice complet pour apprendre à coder, compter et relire des commentaires.
Sources primaires et limites documentaires vérifiées le 25 octobre 2026
Dernière modification de la page :
Réponse courte
L’essentiel en une minute
Pour analyser des commentaires de satisfaction avec une IA, définissez les thèmes et l’unité comptée, préparez les données dans un environnement autorisé, puis contrôlez les propositions sur le texte original. Comptez séparément commentaires, mentions et répondants. Une synthèse fluide ne prouve ni la représentativité des réponses ni la fréquence réelle d’un problème.
Dans ce dossier : Formation et maîtrise des usages professionnels IA
Un questionnaire peut proposer des questions fermées et un champ libre. Le score répond à une règle de calcul. Le commentaire exprime ce que son auteur a choisi de raconter. Il peut éclairer une difficulté, contenir plusieurs thèmes ou rester très court. L’analyse qualitative complète le résultat chiffré sans lui être interchangeable.
La HAS a présenté une analyse exploratoire des commentaires e-Satis et un travail sur leur exploitation. Ces publications constituent un exemple institutionnel situé dans son dispositif. Elles ne valident pas un assistant conversationnel généraliste, un traitement local particulier ou une transposition automatique aux établissements médico-sociaux. Ici, le dictionnaire et l’exercice sont proposés par EUAIACT.
Définissez votre question avant de demander une synthèse. « Quels obstacles d’accès à notre accueil sont décrits ? » est plus exploitable que « Que pensent nos usagers ? ». La seconde question invite à généraliser à une population que le fichier ne représente peut-être pas. Indiquez la période, le canal de collecte, les personnes sollicitées et les limites connues.
Une méthode peut être utile même avec un petit corpus, à condition de rester modeste dans les conclusions. Un témoignage isolé peut justifier une vérification sans devenir une fréquence. À l’inverse, un thème souvent cité ne permet pas d’inférer sa gravité ou sa cause.
Les champs libres peuvent contenir des noms, des événements reconnaissables ou des informations sensibles. La CNIL distingue anonymisation et pseudonymisation : remplacer un nom par un code ne garantit pas qu’une personne soit devenue impossible à identifier. Cette distinction concerne aussi les extraits retenus dans le rapport final.
Examinez finalité, accès, conservation, destinataires techniques et réutilisation éventuelle avant de charger un corpus réel. Pour apprendre le codage, des commentaires entièrement inventés suffisent. La méthode proposée ne suppose aucun transfert de données réelles dans une IA, aucun abonnement et aucun essai de produit.
Gardez un identifiant stable par commentaire pour revenir au texte original dans le circuit autorisé. Documentez les exclusions : doublons techniques, champ vide, réponse hors période. Ne supprimez pas un texte parce qu’il est critique ou difficile à ranger. Un commentaire hors sujet peut être conservé dans une catégorie distincte, avec une justification.
Un même répondant peut produire plusieurs messages. Si le fichier ne permet pas de compter les personnes de manière légitime et fiable, annoncez un nombre de commentaires, pas un nombre d’usagers. La différence doit être visible dans le titre du tableau et dans sa légende.
Chaque thème comporte une définition, des critères d’inclusion, des exclusions et un exemple. Définissez séparément le sujet et l’appréciation exprimée. « Accueil » décrit un thème. « Positif », « négatif », « mixte » ou « indéterminé » décrit une orientation du passage, selon une convention à discuter. Une émotion supposée ne remplace pas l’expression réelle.
Le codage multithème permet plusieurs codes pour un commentaire. Dans ce cas, les nombres par thème peuvent dépasser le nombre total de commentaires lorsqu’on les additionne. Cela ne constitue pas une erreur si la règle est annoncée. En revanche, présenter leur somme comme un effectif de personnes serait trompeur.
Essayez la grille sur un petit ensemble relu, puis consignez les désaccords. Si « délai » signifie parfois attente téléphonique et parfois délai de réponse, décidez si ces sous-thèmes servent votre question. Une grille détaillée dont les catégories restent impossibles à distinguer donne une précision de façade.
Construire un dictionnaire avant de coder : grille de lecture
Les six commentaires ci-dessous sont inventés pour l’apprentissage. Ils ne décrivent aucun établissement, patient ou client. Aucun modèle n’a été interrogé pour obtenir leurs étiquettes.
Trois thèmes identifiables apparaissent chacun dans deux commentaires : ACC dans V1 et V3, DEL dans V1 et V4, CAN dans V2 et V6. V5 reste indéterminé. Il existe sept affectations si l’on compte aussi IND, pour six commentaires. V1 contribue à deux thèmes. Aucun nombre de personnes distinctes n’est connu.
Dans le corpus complet, le thème DEL est donc présent dans 2 commentaires sur 6, soit environ 33,3 %. Si l’analyse exclut explicitement V5 pour calculer une part parmi les seuls commentaires thématisables, le dénominateur devient 5 et la part 40 %. Les deux nombres répondent à des questions différentes. Le rapport doit choisir son indicateur et expliquer l’exclusion, plutôt que retenir le pourcentage le plus spectaculaire.
On peut aussi compter deux commentaires mentionnant positivement ACC. Cela ne signifie pas que tous les répondants sont satisfaits de l’accueil ni que la moitié d’une population quelconque le serait. Les six textes sont un support fictif, sans échantillonnage ni mesure de satisfaction réelle.
Le microcorpus fictif et son corrigé : grille de lecture
ID
Commentaire intégral
Codage attendu dans la grille proposée
V1
L’accueil était cordial, mais j’ai attendu longtemps.
ACC positif, DEL négatif
V2
Je n’ai pas réussi à remplir le formulaire en ligne.
CAN négatif
V3
La personne au téléphone m’a expliqué calmement la démarche.
ACC positif
V4
J’attends toujours la réponse à mon courrier.
DEL négatif
V5
Tout est à revoir.
IND, appréciation négative mais sujet indéterminé
V6
Le formulaire papier m’a permis de terminer la démarche.
Une synthèse erronée pourrait affirmer : « 40 % des usagers dénoncent un mauvais accueil. » Elle confond le thème délai avec l’accueil, utilise le sous-ensemble de cinq sans le dire et transforme des commentaires en usagers. Ces trois erreurs demandent des corrections différentes.
Une formulation fidèle serait : « Dans les six commentaires fictifs, deux mentionnent un délai de manière négative. Deux évoquent positivement les conditions relationnelles de l’accueil. Un texte est trop vague pour être rattaché à un thème. Un commentaire peut contribuer à plusieurs thèmes. » Cette réponse est moins spectaculaire, mais son calcul et ses limites sont vérifiables.
L’assistant peut proposer un codage, identifier un passage justificatif et signaler les cas incertains. Le lecteur revient ensuite à chaque original. Demandez-lui de distinguer citation exacte, paraphrase et hypothèse. Un commentaire inventé pour illustrer une tendance ne doit jamais être présenté comme une citation reçue.
Conservez aussi les cas contradictoires. V2 et V6 décrivent deux expériences différentes du canal. Les fusionner en « problème numérique généralisé » ferait disparaître le rôle du support papier. La synthèse doit éclairer les écarts et les pistes à vérifier, pas les gommer.
Pour chaque thème retenu, indiquez le fait observé, la question à vérifier, le responsable de l’examen et l’indicateur de suivi. Dans le cas fictif, les deux délais invitent à vérifier le circuit de réponse. Ils ne démontrent pas une insuffisance d’effectif ou une cause technique.
Une action peut consister à préciser l’information sur le délai, examiner les demandes en attente ou proposer un canal alternatif. Son choix appartient aux responsables. Lors de la collecte suivante, distinguez évolution des textes, variation du nombre de répondants et changement de canal. Une baisse des mentions peut provenir d’une moindre participation.
Archivez la version de la grille, les décisions de codage et les calculs autorisés. Reprenez une sélection de cas après une modification d’outil. Une validation ponctuelle ne démontre pas que toutes les futures synthèses seront fiables.
Une proposition de codage et son acceptation doivent rester distinguables. Le lecteur examine la présence du thème dans le texte et la convention appliquée. Le responsable méthodologique arbitre les désaccords qui révèlent une définition insuffisante. La personne qui autorise une diffusion vérifie ensuite le périmètre des conclusions et les données qui deviennent visibles. Ces fonctions peuvent être regroupées dans une petite équipe, mais leur objet doit rester explicite.
Pour un exercice, demandez à deux participants de coder séparément V1 à V6, puis de comparer les écarts avec la grille. Cette activité est proposée, elle n’a pas été réalisée pour cet article. Un désaccord n’est pas automatiquement une faute : il peut indiquer qu’une catégorie manque ou qu’une phrase accepte plusieurs lectures. Consignez la décision et sa justification avant de réviser l’ensemble des textes concernés.
Après une révision, conservez le lien entre l’ancienne grille et la nouvelle. Un déplacement de commentaires d’un thème à l’autre peut modifier les nombres sans que l’expérience décrite par les répondants ait changé. Si vous comparez deux périodes, utilisez une méthode compatible ou présentez la rupture. Une évolution de classement ne doit pas être racontée comme une amélioration du service.
Placez les règles de calcul près du tableau, pas seulement dans une annexe éloignée. Le lecteur doit comprendre si une cellule compte des textes, des mentions ou des personnes. Le tableau ci-dessous peut servir de contrôle avant diffusion et complète le microcorpus sans ajouter d’observation réelle.
Avec un codage multithème, un commentaire contribue à plusieurs thèmes. La somme peut dépasser 100 %. Annoncez cette convention et le dénominateur. Ne transformez pas les mentions cumulées en personnes.
?Faut-il supprimer les commentaires vagues ?
Conservez leur existence avec une catégorie et une règle explicites. Ils peuvent être exclus d’un calcul particulier, à condition de documenter cette exclusion et de ne pas les effacer du bilan de collecte.
?Une IA peut-elle inventer une citation représentative ?
Elle peut produire une illustration fictive, clairement étiquetée comme telle. Une citation attribuée au corpus doit reproduire un passage réel vérifié, dans le respect du cadre de diffusion et des données.
?Cette méthode remplace-t-elle e-Satis ?
Non. Le guide propose un exercice général de lecture et de codage. Il ne modifie ni un dispositif national, ni ses questionnaires, ni ses règles de calcul ou de restitution.
?Faut-il publier les commentaires bruts ?
La diffusion exige un examen du besoin et des données identifiantes, y compris indirectes. Un rapport synthétique et des extraits autorisés ne demandent pas nécessairement la même audience.
?Peut-on comparer deux périodes ?
Vérifiez que le périmètre, les canaux et les règles de codage sont compatibles. Une variation de participation ou de grille doit être décrite avant toute conclusion sur une évolution.