Aller au contenu principal

Protocole de la méthode INFERENCE

Version 2.0 du 2 novembre 2026.

Ce protocole décrit les règles qu’INFERENCE Consulting applique à chaque mission : comment il observe les réponses des IA, établit les faits avec l’organisation, prépare les décisions et suit les évolutions. Il couvre les dimensions commerciales et institutionnelles retenues au cadrage : les offres, les compétences, les positions et la réputation de l’organisation ainsi que, lorsque la mission le prévoit, son cadre réglementaire. Il précise les documents remis et les conditions de réalisation du travail.

Le protocole est mis à jour à partir des observations du cabinet, de sa pratique, des évolutions des outils utilisés et des références de sa bibliographie, enrichie chaque trimestre. Chaque version publiée porte un numéro de version et la date de sa mise à jour.

Ce que couvrent la mission ponctuelle et l’accompagnement annuel

La mission ponctuelle établit le diagnostic, formule la stratégie d’autorité et prépare le plan d’action. Dans l’accompagnement annuel, le cabinet pilote la mise en œuvre par vos équipes et vos prestataires, suit les évolutions et adapte les actions.

Le diagnostic et le suivi relient les sujets commerciaux et institutionnels utiles à la mission, sans imposer une observation exhaustive. La proposition, établie avec vous, précise les publics étudiés, les décisions qu’ils préparent, les IA observées, le nombre de situations et de questions, les responsabilités, le calendrier et les documents remis.

Le cabinet pilote la mission, des experts techniques (architecture web, apprentissage automatique ou traitement des données) participent au diagnostic et aux recommandations lorsque le sujet l’exige. Votre organisation valide les objectifs, les faits, les informations sensibles et les budgets. La mobilisation de vos équipes pour établir les faits et valider les documents est estimée au cadrage. Le temps de réalisation des actions dépend du plan retenu.

La version en ligne constitue la référence publique. Elle porte un numéro de version et une date, et chaque révision précise les changements apportés.

Savoir où agir et quels moyens engager

La mission sert à décider : sur quels sujets et auprès de quels publics renforcer une position, quelles informations clarifier, quelles preuves réunir, quelles reconnaissances rechercher, quels problèmes traiter en priorité.

Chaque recommandation s’appuie sur le diagnostic et précise l’action à réaliser, son responsable et les validations nécessaires. Une dépense de communication, de publication ou d’optimisation n’est jamais justifiée par le seul fait qu’une technique existe.

Le cabinet peut conclure qu’il suffit de mieux présenter une preuve existante ou qu’une action peut attendre. L’accompagnement réexamine ensuite ces choix selon l’avancement des travaux, les observations et les priorités de l’organisation.

Le déroulement d’une mission

Une mission se déroule en trois temps : observer, décider et agir. Les six étapes suivantes en précisent le déroulement.

  1. Le cadrage fixe les publics, les décisions qu’ils préparent, les IA observées, le volume d’observation, les responsabilités et les documents remis.
  2. La collecte recueille les réponses des IA aux questions retenues pour vos publics. Une phase pilote permet d’en ajuster le volume.
  3. Le diagnostic compare les réponses aux faits établis avec vos équipes et distingue les explications étayées des hypothèses à vérifier.
  4. La stratégie d’autorité définit les positions à défendre, les narratifs à expliciter, les preuves à réunir et les actions prioritaires.
  5. Le plan d’action et les briefs répartissent les actions entre vos équipes et vos prestataires, en précisant les validations requises et les échéances.
  6. Le suivi GEO mesure les évolutions et permet au cabinet d’adapter les actions pendant l’accompagnement annuel.

Les trois premières étapes sont le temps de l’observation, la quatrième celui de la décision, les deux dernières celui de l’action et de la mesure. Les sections qui suivent précisent les règles de chaque temps, qui ne s’appliquent pas toutes avec la même intensité à toute mission. Une mission limitée à un public ou à un sujet peut être menée en quelques semaines, selon le périmètre et les délais de validation convenus.

Trois niveaux d’application

L’application du protocole dépend du périmètre et des enjeux de la mission. La note de cadrage indique, pour la mission considérée, ce qui relève de chacun des trois niveaux.

• Le socle vaut pour toute mission : des situations décrites, des faits validés, des questions préparées à l’avance, des observations répétées dans des conditions connues, la distinction entre présence, sélection, comparaison favorable et recommandation, un diagnostic qui distingue ce qui est établi de ce qui reste à vérifier, un examen humain, la confidentialité.

• Les modalités suivantes sont fixées au cadrage : le nombre de situations, d’IA, de formulations et de répétitions, la part des réponses dont les sources sont vérifiées, l’étendue de la seconde lecture et le périmètre des relevés trimestriels de l’accompagnement.

• Certains travaux ne sont engagés que lorsqu’une question de la mission les justifie et que leur coût a été accepté : chercher à isoler l’effet d’une action, comparer les observations de plusieurs périodes lors d’une seconde lecture, collecter des réponses avec et sans phrase de contexte, fournir des documents aux IA, observer des systèmes capables d’agir, constituer un dossier réglementaire ou mettre en place des alertes sur une situation sensible.

Toute mission applique le socle et les modalités convenues au cadrage. Les approfondissements ne sont pas systématiques.

1. Observer et diagnostiquer

Définir le périmètre et les responsabilités

Le cadrage précise les objectifs, les publics, les situations de décision, les entités, les territoires et les systèmes étudiés. Il retient les questions commerciales et institutionnelles pertinentes, ainsi que les relations à examiner entre elles. Il fixe les livrables, le calendrier, les responsabilités, les conditions d’accès aux informations et les validations. Il sépare le diagnostic et la recommandation, la préparation des actions et leur exécution. Les extensions de périmètre sont discutées et documentées avant leur mise en œuvre.

Le cabinet pilote chaque mission et en assure la cohérence stratégique. Les experts techniques qu’il mobilise participent au diagnostic et aux recommandations, dans leurs domaines de compétence et sous sa responsabilité. Leur contribution à l’accompagnement dépend des problèmes identifiés et des actions retenues.

Les observations portent principalement sur des informations publiques. L’emploi de documents non publics est soumis aux modalités convenues avec l’organisation. Le cadrage indique les restrictions de diffusion et les personnes habilitées à valider les éléments sensibles.

Décrire les personnes et les situations de décision

Le point de départ est la personne qui interroge l’IA et la décision ou le jugement qu’elle prépare. Chaque public prioritaire est décrit par un ou plusieurs personas situés dans un contexte précis. Cette démarche relie les utilisateurs, leurs objectifs, leurs tâches, leurs ressources et leur environnement, conformément à l’intérêt porté au contexte d’utilisation dans les travaux d’utilisabilité. 10

La fiche de situation précise la fonction de la personne, son niveau de connaissance, sa connaissance préalable de l’organisation, le besoin qui déclenche la consultation et la décision ou le jugement préparé. Elle décrit les critères de choix, les contraintes, la question initiale, les demandes complémentaires plausibles et l’usage envisagé de la réponse.

Elle indique aussi les conséquences possibles pour l’organisation. Les situations sont construites à partir des entretiens, des questions reçues par les équipes, des documents commerciaux, des études de publics et des autres éléments disponibles.

Une situation créée par le cabinet reste une hypothèse d’usage tant qu’elle n’a pas été confrontée à des publics réels. Les observations décrivent les réponses des outils aux situations testées. Elles ne mesurent pas leur fréquence dans la population ni la proportion de personnes qui suivent ces réponses.

Choisir les systèmes et consigner les configurations

Les produits et les configurations sont choisis selon les usages plausibles des publics et les décisions étudiées. Le registre décrit chaque configuration : le fournisseur, le produit, l’interface, l’identifiant et la version du modèle tels qu’ils sont affichés, les fonctions de recherche ou d’action disponibles et leur activation, le type de compte, grand public ou entreprise, la langue de l’interface, la localisation pertinente et la période d’observation. Une information inaccessible est marquée comme inconnue. Elle n’est pas reconstituée par supposition.

Les relevés de référence sont réalisés dans une session nouvelle, sur un compte sans historique, avec la mémoire et la personnalisation désactivées lorsque le produit le permet. Lorsqu’il ne le permet pas, leur état est consigné tel qu’il peut être observé. Les observations faites sur un compte personnalisé ou avec un historique constituent une condition distincte, identifiée comme telle.

Chaque relevé porte sa propre trace : la configuration dont il relève, la date et l’heure, la version affichée au moment du relevé, le déclenchement observé ou indéterminé de la recherche et tout écart constaté avec la configuration décrite. Sans cette trace, un écart entre répétitions ne peut être attribué ni au système ni aux conditions d’observation.

Le registre note aussi les événements d’actualité, propres à l’organisation ou à son secteur, survenus dans les semaines qui précèdent le relevé et susceptibles d’orienter les réponses ou les sources consultées.

Les observations réalisées dans une application grand public sont séparées de celles obtenues par une interface de programmation. L’équivalence de leurs réponses n’est pas présumée.

Un système peut associer des connaissances acquises pendant l’entraînement et des informations récupérées au moment de la demande. La présence d’une fonction de recherche ne prouve pas son utilisation dans toutes les réponses. Son déclenchement est relevé lorsqu’il est visible ou attesté (sinon, il reste indéterminé). 2 3

Pour les systèmes capables d’agir, la sélection proposée, la décision déléguée et l’action exécutée sont distinguées. Aucun essai susceptible de produire une action externe n’est effectué hors du périmètre expressément autorisé.

Établir les faits de référence

Le registre rassemble les informations nécessaires à la mission : activités, compétences, offres, réalisations, statuts, autorisations, événements et éléments sensibles. Chaque entrée précise l’entité, la portée de l’affirmation, la période, les sources, les preuves et la fonction habilitée à la valider. Les faits établis, les déclarations attribuées, les objectifs, les opinions et les hypothèses sont distingués. Une affirmation insuffisamment documentée peut conduire à rechercher une preuve, à préciser son périmètre ou à revoir sa formulation.

Les qualités souhaitées sont reliées aux critères des situations étudiées. Les limites, les informations défavorables et les controverses pertinentes figurent également dans le référentiel. Celui-ci ne constitue pas un dossier sélectionné pour obtenir uniquement des réponses favorables.

Le registre distingue les informations publiques, celles dont une publication peut être envisagée et celles qui doivent rester confidentielles. Le fait qu’une pièce soit utile au diagnostic ne vaut pas autorisation de la transmettre à un service tiers ou de la publier.

Examiner les sources et leurs relations de dépendance

Pour chaque information prioritaire, le cabinet examine les sources qui la publient, la confirment ou la contredisent. Il apprécie leur compétence sur le sujet, leur précision, leur actualité, leur accessibilité et la clarté de l’attribution.

L’analyse distingue la publication initiale, les reprises qui en dépendent et les confirmations reposant sur une vérification, une mesure ou une expertise distincte. Plusieurs reprises d’une même affirmation ne sont pas comptées comme autant de preuves indépendantes.

Une source de l’organisation peut faire référence pour décrire un produit ou un engagement. Son rôle n’est pas identique à celui d’un organisme qui vérifie une qualité, d’un registre qui atteste un statut ou d’un tiers qui formule une appréciation. Les désaccords documentés ne sont pas supprimés de la cartographie.

Construire les questions et les conversations

Les questions sont reliées aux situations retenues. Elles peuvent porter sur la découverte d’acteurs, la sélection, la comparaison, les compétences, les risques, les preuves ou le cadre réglementaire. Les demandes complémentaires examinent la manière dont une réponse se précise, résiste à une objection ou évolue après une information nouvelle.

Chaque question de référence est typée avant la collecte selon ce qu’elle demande : une information sur les acteurs, les offres ou les faits, ou une aide à la décision, c’est-à-dire une sélection, une comparaison ou une recommandation. Le taux de présence est calculé sur l’ensemble des questions. Les taux de sélection, de comparaison favorable et de recommandation le sont sur les seules questions d’aide à la décision.

Les observations sans mention de l’organisation sont distinguées de celles qui la nomment. Les questions de référence sont préparées avant la collecte. Les reformulations et les explorations ajoutées en cours d’analyse sont identifiées séparément. 81

Chaque jeu de questions de référence s’ouvre par une phrase de contexte, écrite à la première personne de la situation étudiée. Elle indique qui interroge l’outil et quelle décision ou quel jugement cette personne prépare. Elle est fixée avant la collecte, identique dans toutes les configurations et reproduite dans le relevé. Dans les jeux sans mention de l’organisation, elle ne nomme ni l’organisation ni les entités comparées et ne demande pas à l’outil de citer des noms : une consigne de ce type oriente la réponse vers une liste et modifie ce que mesure la présence. Lorsque le cadrage prévoit une telle consigne, elle fait l’objet d’un jeu distinct, identifié comme tel. Le plan peut prévoir, pour un même jeu, une collecte avec et une collecte sans phrase de contexte. Les deux constituent des conditions distinctes, identifiées comme telles et jamais agrégées. Leur comparaison mesure l’incidence du contexte sur les réponses. La collecte sans contexte correspond aussi à l’usage des personnes qui posent une question sans décrire leur situation.

Pour observer une représentation spontanée, le cabinet ne fournit pas d’abord au système les faits et les preuves réunis pour la mission. Ces éléments servent ensuite de référentiel de comparaison. Les tests où des documents sont volontairement fournis sont conservés dans une catégorie distincte : ils évaluent une autre condition d’usage.

La conversation complète est conservée lorsque ses étapes conditionnent l’interprétation. Les questions ne doivent pas être reformulées jusqu’à obtenir seulement la réponse souhaitée.

Définir le nombre, la répartition et les répétitions

Le plan précise le nombre de situations, de configurations, de formulations, de répétitions, de conversations et de périodes d’observation. Plusieurs formulations d’une même question sont prévues : des différences de forme sans incidence sur le sens peuvent modifier les réponses d’un système. 86 Le plan indique la répartition prévue et les conditions susceptibles de justifier une extension.

La collecte s’ouvre par une phase pilote, conduite sur une partie des situations et des configurations, qui mesure la variabilité des réponses. Elle décide de la suite. Lorsque les réponses sont stables, le plan convenu s’applique tel quel. Lorsqu’une question présente une forte variabilité, les répétitions sont augmentées sur cette question seule, dans les limites de volume et de budget fixées au cadrage. Toute extension au-delà de ces limites fait l’objet d’un accord, avec son coût et son incidence sur le calendrier. Il n’existe pas de nombre minimal universel garantissant la validité de toutes les conclusions (le plan dit ce qui a été observé et dans quelles limites).

Les tours d’une même conversation ne sont pas supposés indépendants. Le nombre total de réponses ne remplace pas la description du nombre de conversations, de questions et de configurations. Les agrégations conservent cette distinction.

Le plan ne prévoit pas d’arrêter la collecte dès l’obtention d’une réponse favorable. Les ajouts, les exclusions justifiées et les écarts au protocole sont consignés. Les recherches sur la répétabilité de la mesure de visibilité soulignent l’intérêt de documenter cette variabilité. 61

Chaque taux de référence est présenté avec l’écart constaté entre ses répétitions, au minimum la valeur la plus basse et la plus haute obtenues dans une même configuration. Une observation réalisée en un seul passage et à une seule date est un relevé unique : elle peut éclairer une exploration ou une alerte, elle ne produit pas d’indicateur de référence et n’est pas présentée comme représentative du comportement d’un système.

Conserver les observations et les cas non concluants

Chaque relevé conserve sa trace de configuration, la question, la phrase de contexte, la réponse, le contexte utile, les sources consultées lorsqu’elles sont observables, les sources affichées, les sources citées et les paramètres observables. Les liens cités sont examinés lorsque cela entre dans le périmètre de l’analyse. 83

Le relevé distingue quatre statuts d’une source. Une source est consultée lorsque le système l’a lue pour préparer la réponse et que cette lecture est observable ; affichée lorsque l’interface la présente ; citée lorsque la réponse la nomme ; reprise lorsqu’une affirmation de la réponse peut être rattachée à son contenu. Les trois premiers statuts sont des observations. Le quatrième est établi par recoupement, par une personne, sur les affirmations que le cadrage désigne comme prioritaires et, lorsque la mission le justifie, sur un échantillon plus large de réponses. Aucun de ces statuts ne mesure le poids d’une source dans la réponse : une source consultée peut n’avoir rien apporté, une source citée peut l’être pour une seule phrase, et le poids que le système accorde à ce qu’il lit n’est pas observable de l’extérieur. 4 87 Une part de consultations n’est jamais présentée comme une part d’influence. Les sources consultées décrivent ce que le système va lire pour une situation donnée, les sources reprises ce qu’il en retient. L’écart entre les deux fait partie du diagnostic.

Lorsque les sources consultées sont observables, le relevé les classe par type, les compte par domaine et par page et note leur date de publication ou de dernière modification. Le moyen d’observation est consigné (une interface de programmation et une application grand public n’exposent pas nécessairement les mêmes sources).

Les absences de mention, les refus et les listes vides font partie des résultats. Les erreurs techniques, les indisponibilités et les réponses interrompues sont signalées à part. Elles ne sont pas effacées silencieusement et leur traitement dans les calculs est explicité.

Le corpus de référence reste distinct du corpus exploratoire. Une observation ajoutée pour comprendre une anomalie peut éclairer le diagnostic sans être intégrée rétroactivement à un indicateur de référence.

Qualifier les écarts et leurs explications

Le diagnostic confronte les réponses au référentiel. Il distingue les erreurs factuelles, les omissions pertinentes, les confusions d’entités, les problèmes de date, les affirmations insuffisamment étayées, les absences déclarées et les différences de jugement.

Une recommandation défavorable n’est pas automatiquement une erreur. Une offre peut être correctement décrite mais moins adaptée à un besoin précis. Une appréciation favorable peut, inversement, reposer sur une qualité inexistante. L’exactitude et la pertinence sont examinées indépendamment de l’intérêt commercial immédiat de la réponse.

Trois niveaux de conclusion sont utilisés. Le constat décrit ce qui a été observé. L’explication étayée relie ce constat à des éléments vérifiés suffisants pour soutenir une interprétation. L’hypothèse désigne une explication plausible qui demande encore une vérification.

La grille d’analyse porte sur cinq fonctions : connaissances acquises, récupération d’informations externes, identification des entités, sélection et synthèse, puis restitution. Cette grille organise les vérifications. Elle ne reconstitue pas le fonctionnement interne d’un système propriétaire et n’impose pas une séquence universelle. 88

Une source citée n’est pas supposée être l’unique information utilisée. Une justification formulée par le modèle reste une partie de sa réponse, et non une trace fiable de tous ses calculs. Des travaux montrent qu’un modèle peut donner une explication plausible qui passe sous silence ce qui a réellement orienté sa réponse. 87 Les limites d’observation sont maintenues dans le diagnostic.

Les priorités combinent la gravité possible, la récurrence dans le protocole, la qualité des preuves et les possibilités d’action. L’exposition réelle des publics est distinguée de la fréquence des résultats dans les tests.

2. Définir la stratégie d’autorité

Choisir les positions à défendre et les narratifs à expliciter

Le cabinet relie les compétences et les réalisations de l’organisation aux besoins des publics. Il détermine les sujets sur lesquels une position peut être légitimement défendue et les limites qui doivent accompagner sa présentation. C’est le contenu de la stratégie d’autorité.

Les narratifs organisent les faits et leurs relations : nature du problème traité, savoir-faire mobilisé, circonstances dans lesquelles il est pertinent, preuves et réserves. Ils ne consistent pas à fabriquer une histoire indépendante des éléments disponibles.

La stratégie distingue l’expression de l’organisation, les documents qui établissent un fait et les confirmations qu’il serait pertinent de rechercher auprès d’acteurs compétents. Elle tient compte des informations contradictoires et des objections documentées.

Choisir les actions justifiées par le diagnostic

Les actions peuvent concerner la clarté des identités et des activités, les pages institutionnelles, les fiches d’offres, les documents techniques, les réalisations, les certifications, les informations de registres, les relations presse ou les contributions d’experts.

Elles peuvent également porter sur une rectification, une mise à jour, une chronologie, la restitution réglementaire ou les conditions techniques d’accès aux contenus. Une méthode étudiée dans un environnement expérimental n’est pas présentée comme une recette universelle. 8 9 20

Chaque action est examinée au regard de son utilité attendue, de son coût, de son délai, de ses risques et de la qualité des preuves qui la soutiennent. Le cabinet peut recommander de ne pas produire de contenu supplémentaire, de réutiliser un document existant ou de différer une initiative.

Les confirmations recherchées respectent l’indépendance des tiers. Le cabinet ne propose pas de faux témoignages, de sources factices ou de consignes dissimulées destinées à forcer les réponses des systèmes.

Préparer le plan et les briefs

Chaque action est reliée à une situation, à un problème et à un mécanisme attendu. Le plan précise les preuves, la production envisagée, le responsable, les validations, les dépendances, le calendrier, les ressources et les critères de réexamen.

Les travaux immédiats sont distingués du plan à 90 jours et de la trajectoire à 12 mois. Les échéances organisent l’action. Elles ne garantissent pas une modification des réponses à ces dates.

Les incertitudes importantes restent visibles. Un brief doit permettre à l’équipe chargée de réaliser une production de comprendre sa finalité, ses limites et les éléments à ne pas modifier sans validation.

3. Conduire les actions et adapter la stratégie

Organiser la réalisation et les arbitrages

L’organisation valide les objectifs, les faits, les informations sensibles et les budgets. Le cabinet fournit le diagnostic, la stratégie, les briefs et les critères d’appréciation. Dans l’accompagnement, il facilite la coordination et prépare les décisions.

Les équipes internes et les prestataires existants de l’organisation exécutent les actions, chacun dans son métier (agence de relations presse, équipes de communication et de marketing, prestataire SEO, équipe web). Le responsable désigné par l’organisation valide les briefs et arbitre, sur la base des objectifs et des conséquences exposées, lorsque des recommandations divergent entre intervenants. Lorsqu’une compétence manque, le cabinet précise les travaux attendus et le profil à rechercher, et peut aider l’organisation à comparer les propositions. L’organisation choisit et mandate le prestataire chargé de la réalisation. Les experts techniques mobilisés par le cabinet n’exécutent pas les actions.

La recommandation précède le choix définitif des exécutants. Les honoraires de conseil et les budgets de réalisation sont séparés. Les validations, les décisions et les changements importants sont consignés.

Fixer les rendez-vous de l’accompagnement

L’accompagnement annuel prévoit un rendez-vous mensuel de conseil d’une heure, des observations trimestrielles comparables et un bilan annuel de la trajectoire. Les explorations nouvelles sont distinguées du suivi stable.

Le rendez-vous mensuel est le moment des décisions. Le travail de l’accompagnement se fait entre les rendez-vous : préparation et lecture des observations, coordination des équipes et des prestataires, traitement des alertes et des arbitrages, dans le périmètre fixé au cadrage.

Les alertes concernent le périmètre convenu. Leur organisation ne vaut pas surveillance permanente de l’ensemble des systèmes et des conversations. Les modalités de déclenchement, de transmission et de traitement sont définies avec l’organisation.

Les experts techniques sont mobilisés en fonction des besoins identifiés, pour l’analyse et les recommandations. L’accompagnement ne répète pas nécessairement tous les travaux du diagnostic initial à chaque période.

Choisir les indicateurs et expliciter les calculs

Les indicateurs sont retenus avant la collecte selon les objectifs. Le protocole peut examiner les quatorze dimensions suivantes : présence de l’organisation ou de l’offre ; sélection parmi les acteurs proposés ; comparaison favorable ; recommandation ; reconnaissance des avantages pertinents ; attribution correcte des qualités ; exactitude factuelle ; restitution réglementaire ; mentions de risques ; contexte donné à ces risques ; caractère étayé des qualités ; usage observé ou indéterminé de la recherche externe ; provenance, date et indépendance des sources citées et reprises, et sources consultées lorsqu’elles sont observables ; variabilité des réponses.

La présence signifie que l’organisation ou l’offre est mentionnée. La sélection, ou prise en considération, signifie qu’elle figure dans l’ensemble proposé pour répondre au besoin. La comparaison est favorable lorsque la réponse lui attribue des atouts correspondant aux critères de la situation, sans réserve disqualifiante. Ce résultat est qualifié par une personne, à partir du texte de la réponse et selon une règle fixée au cadrage. Une seconde lecture est organisée lorsque l’enjeu le justifie. La recommandation signifie qu’elle est effectivement conseillée, avec les raisons et les conditions associées. Ces quatre résultats ne sont pas fusionnés. Le passage d’une comparaison favorable à une recommandation est examiné dans les conversations où la personne demande quel acteur retenir.

La présence, la sélection, la comparaison favorable et la recommandation sont calculées pour l’organisation ou l’offre et pour chaque entité de l’ensemble de comparaison retenu au cadrage. Elles sont présentées dans une matrice qui croise les entités et les situations étudiées, ou les thèmes lorsqu’une situation en couvre plusieurs. Un taux global n’est pas remis sans cette matrice : une organisation peut être présente dans la plupart des réponses sur un sujet et absente des réponses sur un autre. Chaque cellule indique le nombre de réponses sur lequel elle est calculée. Les configurations ne sont pas confondues dans une même cellule.

Lorsqu’une réponse à une question d’aide à la décision nomme plusieurs entités, le rang de l’organisation parmi elles est relevé. Il n’est interprété comme un classement que si la réponse le présente comme tel ou si l’ordre se maintient entre répétitions (sinon il est consigné sans interprétation). Le rang est présenté par sa distribution, part des réponses où l’organisation est citée en premier, parmi les trois premières ou plus loin, avec le nombre de réponses concernées.

Chaque taux est accompagné de son numérateur, de son dénominateur et du volume d’observations. Le traitement des absences, des refus, des listes vides et des erreurs techniques est explicite. Un dénominateur nul conduit à un indicateur non calculable, non à une valeur arbitraire.

L’exactitude factuelle porte sur les affirmations évaluables. Chaque affirmation vérifiable sur l’organisation est classée : exacte et reprise d’une source identifiée ; exacte sans source identifiée ; inexacte ; invérifiable au regard du référentiel ; absence déclarée, lorsque le système indique ne pas disposer de l’information. 16 Le classement porte d’abord sur les affirmations qui engagent l’organisation au regard des enjeux de la mission : son identité, son statut, ses autorisations, ses compétences, sa position parmi les acteurs comparés. Les autres affirmations sont examinées sur échantillon. Tout n’appelle pas le même degré de vérification, et le niveau retenu est indiqué avec les résultats. Le taux d’exactitude est calculé sur les affirmations exactes et inexactes. Les affirmations invérifiables et les absences déclarées sont comptées à part. La fréquence des absences déclarées est rapportée à celle des affirmations inexactes : un système qui dit ne pas savoir se distingue d’un système qui affirme à tort. Une réponse qui ne contient aucun fait vérifiable n’obtient pas automatiquement une exactitude de 100 %. Les omissions significatives sont examinées séparément des affirmations erronées.

Les éventuelles pondérations sont décrites et les résultats détaillés restent accessibles. Un score agrégé n’est pas présenté comme une part de marché, une probabilité universelle de recommandation ou une mesure représentative de tous les utilisateurs.

La tonalité peut être décrite, mais elle ne remplace ni la vérification des faits ni l’analyse des raisons. Les conditions de collecte, les extensions possibles et leurs coûts sont convenus avant de produire les indicateurs de référence.

Préserver les comparaisons dans le temps

Un ensemble stable de situations, de questions et de configurations est maintenu autant que possible. Il peut être complété par un volet exploratoire distinct. Les répétitions permettent de situer une évolution par rapport à la variabilité des réponses.

Les changements de modèle, de version, d’interface, d’outils, de paramètres, d’offre ou de contexte sont consignés. Lorsque ces changements réduisent la comparabilité, le bilan l’indique. Une nouvelle référence peut être nécessaire. Les séries ne sont pas artificiellement présentées comme continues.

Les constats d’une configuration ne sont pas transférés automatiquement à une autre langue, une autre interface ou un autre territoire.

Distinguer réalisation, évolution et causalité

Le bilan sépare l’exécution des travaux, les changements observés dans les réponses et les conséquences possibles pour les décisions des publics. Il examine les autres explications plausibles : nouvelle source, évolution du produit, actualité ou changement de contexte.

Le lien entre une action et un changement s’établit par une chaîne de constats, chacun daté et documenté : l’action a été réalisée ; la page ou le document produit a été lu par les robots d’indexation des fournisseurs, lorsque les journaux du serveur le montrent, ou consulté par un système lors d’un relevé ; la source est citée ou reprise dans les réponses ; les réponses mesurées ont changé, en fréquence et avec leur écart entre répétitions. Cette chaîne établit la plausibilité d’un lien. Elle n’établit pas l’effet isolé de l’action. Elle est qualifiée selon les trois niveaux de conclusion du diagnostic : constat pour chaque maillon observé, explication étayée lorsque la chaîne est complète et que les autres explications plausibles ont été examinées, hypothèse dans les autres cas.

Dans une mission ordinaire, le bilan s’en tient là : il documente l’évolution des réponses et apprécie la plausibilité de son lien avec le plan d’action, sans chercher à démontrer l’effet propre de chaque action. Lorsque plusieurs actions sont engagées ensemble, l’attribution porte sur le plan d’action, non sur chacune de ses actions.

Isoler l’effet d’une action est un approfondissement. Il suppose un étalement des actions dans le temps ou un témoin (une situation, un territoire, une entité comparée ou une configuration laissés sans action et observés dans les mêmes conditions), convenu au cadrage lorsque l’organisation pose la question de l’attribution et accepte son coût. L’étalement reste exposé aux changements de systèmes survenus entre deux étapes. Un témoin n’est jamais parfaitement comparable, les systèmes évoluant pour toutes les situations à la fois.

Une comparaison avant/après ne suffit pas, à elle seule, à démontrer l’effet causal d’une intervention. Une attribution plus forte demande un dispositif adapté et des données suffisantes. Elle n’est pas présumée.

Le suivi permet de poursuivre, d’adapter, de compléter, de suspendre ou d’arrêter une action. Les décisions tiennent compte de l’enjeu, de la preuve, de la variabilité et des moyens disponibles.

Traiter les situations sensibles

Les sujets judiciaires, sociaux, sanitaires, réglementaires ou fortement réputationnels sont identifiés au cadrage et réexaminés lorsqu’ils apparaissent. Les faits sont validés par les fonctions compétentes. Les analyses et recommandations sensibles font l’objet d’un examen humain renforcé et, lorsque nécessaire, d’une seconde lecture.

La décision de publier tient compte du risque d’amplification. Une information utile au diagnostic peut devoir rester confidentielle. Les obligations, les droits des personnes, les contraintes du dossier et les conseils juridiques priment sur la recherche d’un avantage de représentation.

L’alerte précise la réponse observée, le contexte, les références, l’écart, les conséquences possibles et la décision attendue. Les interlocuteurs, les délais de traitement et les validations sont définis dans le cadre de la mission. Ils ne sont pas remplacés par une qualification automatique d’urgence.

Le cabinet ne se substitue ni aux autorités ni aux conseils juridiques. Il ne promet pas de faire disparaître des faits établis ou des critiques documentées.

Vérifier la restitution du cadre réglementaire

Le contrôle s’appuie sur un référentiel daté et validé par les fonctions juridiques, conformité ou affaires réglementaires. Il précise l’entité, l’activité, le territoire, la période, les textes, les autorisations, les certifications et les exceptions pertinentes.

La vérification distingue l’existence d’une source, sa compréhension et son applicabilité. Elle sépare un texte adopté d’un texte en vigueur, une recommandation d’une obligation et une norme volontaire d’une exigence applicable.

Les restitutions sont qualifiées comme correctes, incomplètes, incorrectes, absentes ou indéterminées. Les raisons et les limites sont explicites. Des indications complémentaires peuvent signaler une date périmée, une mauvaise entité ou une juridiction inadaptée.

Une question qui demande une interprétation non validée est transmise à la fonction compétente. Le cabinet ne transforme pas une hypothèse en conclusion juridique. Ce volet ne constitue ni un audit général de conformité ni une certification.

Ce que les IA disent du statut et des obligations d’une organisation réglementée

Assurer la qualité de l’analyse et la supervision humaine

Les outils automatisés peuvent contribuer à la collecte, à l’organisation et au repérage des écarts. Leur emploi est documenté. Les règles de qualification et de calcul sont définies de manière à pouvoir être comprises et discutées.

Les cas ambigus et sensibles sont examinés par une personne compétente. Une seconde lecture peut être organisée sur un échantillon ou sur des catégories à risque. Lorsqu’elle sert à comparer des périodes, le second lecteur reçoit les réponses sans leur date ni l’indication de la période à laquelle elles appartiennent, dans la mesure où leur contenu ne la révèle pas. Les désaccords sont consignés et peuvent conduire à préciser les règles, à revoir une qualification ou à approfondir une vérification.

Les traces disponibles doivent permettre de retrouver les observations qui fondent une recommandation. Le niveau de preuve, les données manquantes et les limites restent visibles dans les livrables.

Cette attention au contexte, à la documentation, à la supervision et au suivi rejoint des principes du NIST AI RMF 1.0. Cette référence à un cadre volontaire ne constitue ni une certification du protocole, ni une homologation, ni un soutien du NIST au cabinet. 70

Confidentialité et traitement des documents

Les conditions d’accès, de conservation, de partage et de suppression des documents sont définies avec l’organisation. Les accès sont limités aux intervenants autorisés selon leur rôle et le besoin de la mission. Les documents non publics ne sont pas transmis à un service tiers sans autorisation et sans examen des conditions applicables. Le recours à un outil ne vaut pas autorisation générale d’y verser les dossiers du client.

Les experts techniques mobilisés sont soumis aux mêmes exigences de confidentialité et de traçabilité. Le cabinet ne cite pas publiquement l’identité de ses clients ni le contenu de leurs missions.

Les informations publiques peuvent elles-mêmes comporter des données sensibles pour les personnes ou pour l’organisation. Leur caractère accessible ne dispense pas d’examiner la pertinence de leur traitement et de leur éventuelle rediffusion.

Le contenu des documents remis

La mission ponctuelle remet deux documents : le relevé, avec son diagnostic, et la stratégie d’autorité, avec sa carte des sources, son plan d’action et ses briefs. L’accompagnement annuel y ajoute le bilan. Ces documents réunissent les dix éléments décrits ci-dessous, selon la répartition suivante : la note de cadrage fait partie de la proposition ; la carte des situations, le relevé initial, le registre des faits et le diagnostic composent le premier document ; la stratégie d’autorité, le plan d’action et les briefs composent le second ; le dossier de restitution réglementaire, lorsqu’il est prévu, et les notes d’alerte, lorsqu’une situation sensible apparaît, s’y joignent ; les notes de suivi et le bilan annuel relèvent de l’accompagnement. Le cadrage détermine la forme de chacun.

La remise ne se limite pas à des graphiques ou à un score. Elle doit permettre à l’organisation de comprendre les raisons des choix et de mobiliser les intervenants responsables.

Clore une mission et tenir le protocole à jour

La restitution finale vérifie la couverture du périmètre, la remise des documents et l’explicitation des limites. Les actions à engager, leurs responsables, les validations restantes et les incertitudes non résolues sont identifiés.

Les indicateurs et les conditions du suivi sont rappelés. La clôture d’un diagnostic ne signifie pas que les représentations ont déjà changé, ni que toutes les causes ont été démontrées.

Les évolutions importantes de la méthode et du protocole sont datées et versionnées. Une révision précise ce qui change dans les règles, les indicateurs ou les responsabilités.

La version 1.2 du 14 octobre 2026 avait introduit la trace de configuration des relevés, le typage des questions, la phrase de contexte, les quatre statuts d’une source, la matrice par situation, la chaîne de constats et l’architecture des documents remis.

La version 2.0 du 2 novembre 2026 remplace la version 1.2. Elle étend le périmètre aux offres comme à l’organisation, précise les responsabilités et les deux documents remis, et distingue quatre résultats mesurés, dont la comparaison favorable.

Le cabinet s’engage sur le travail décrit, les documents et les échéances convenus. Il applique ces règles à chaque mission et vous présente la manière dont elles sont mises en œuvre.

Découvrir la mission et ses modalités · Consulter les références scientifiques et techniques

Sources et références