Méthodologie
Cette page explique exactement ce que nous faisons, avec quels modèles et avec quels paramètres. Elle est publiée parce que c'est la première question de tout acheteur qui sait de quoi il parle, et parce qu'une mesure qui ne peut pas être auditée ne vaut rien.
Pourquoi ce n'est pas identique à une question posée dans l'application ChatGPT
Nous disons mesurer si votre marque apparaît dans les moteurs d'IA. Techniquement, nous appelons l'API officielle de chaque modèle et, pour les AI Overviews de Google, nous observons la page de recherche via un prestataire externe. Ce sont des choses différentes et les écarts sont matériels.- Le produit grand public a son propre prompt système, qui n'est pas public et que nous ne reproduisons pas.
- Il dispose d'une mémoire et d'une personnalisation par utilisateur : deux personnes différentes obtiennent des réponses différentes à la même question.
- Il route vers des variantes de modèle différentes et mène des expérimentations A/B actives qui changent sans préavis.
- Sa pile de recherche et son réordonnancement des résultats ne sont pas ceux exposés par l'API.
La conséquence est concrète : si vous ouvrez l'application ChatGPT et posez la même question, vous pouvez obtenir quelque chose de différent de ce que dit votre rapport. C'est pourquoi la valeur du produit n'est pas « la vérité absolue d'une réponse », mais la série temporelle comparative face à vos concurrents, qui elle est robuste car le biais est constant pour tous.
Moteurs et fidélité
Chaque moteur porte une étiquette de fidélité indiquant à quel point ce que nous mesurons ressemble à ce que voit une personne. Elle apparaît dans l'interface à côté de chaque chiffre, pas en note de bas de page.
| Moteur | Fidélité | Recherche web | Renvoie des citations |
|---|---|---|---|
| ChatGPT (API) | API avec recherche web activée | Oui | Oui |
| Claude (API) | API avec recherche web activée | Oui | Oui |
| Gemini (API) | API avec recherche web activée | Oui | Oui |
| Perplexity (API) | API avec recherche web activée | Oui | Oui |
| Google AI Mode (chat) | Résultat observé dans le moteur de recherche | Oui | Oui |
| Google AI Overview | Résultat observé dans le moteur de recherche | Oui | Oui |
Google AI Overviews n'a pas d'API officielle : seul le résultat réel du moteur de recherche peut être observé. Ce signal est celui à la fidélité la plus élevée du système et, tant qu'il est en bêta, il n'entre pas dans le chiffre principal.
Les AI Overviews de Google n'ont pas d'API officielle : ils sont observés comme un instantané de la page de recherche pris par un prestataire externe (DataForSEO), avec le pays du prompt déclaré à chaque requête. Si la page n'affiche pas de panneau, la réponse reste vide. Ce moteur est en bêta et n'entre pas dans les chiffres de synthèse.
Paramètres exacts
| Paramètre | Valeur |
|---|---|
| Température | Celle définie par défaut par le fournisseur. Nous ne la figeons pas : forcer zéro ne produit pas de déterminisme sur des modèles hébergés, et cela éloigne la configuration du produit réel. |
| Prompt système | Aucun au-delà d'un prompt neutre et documenté. Nous ne donnons aucune instruction susceptible de biaiser les marques mentionnées. |
| Mémoire et personnalisation | Désactivées. Chaque requête part de zéro. |
| Tokens de réponse du scanner | 600 |
| Langue et pays | Ceux du marché mesuré, pas ceux du visiteur. Poser la question en espagnol d'Espagne ou en espagnol du Mexique donne des réponses différentes, et cette différence fait partie de ce qui est mesuré. |
| Version de l'analyseur de mentions | 2 |
Comment le score du scanner est calculé
5 questions × 2 moteurs × 1 répétition = 10 réponses. L'un des deux moteurs renvoie toujours des citations, afin que le taux de citation ait un dénominateur.
| Composante | Poids | Formule |
|---|---|---|
| Présence | 40 | 40 × presence_rate |
| Part de voix relative | 25 | 25 × SoV / max(SoV) |
| Position dans le texte | 15 | 15 × (1 − avg_offset_pct/100) |
| Citation | 10 | 10 × citation_rate |
| Sentiment | 10 | 10 × (sentiment + 1) / 2 |
Version de la formule : 1. Si nous modifions les pondérations, les rapports déjà émis ne sont PAS recalculés : de nouveaux rapports sont émis avec une nouvelle version. Un rapport partagé ne peut pas changer de chiffre.
Comment lire ce chiffre, et comment ne pas le lire
Ce score n'est PAS comparable entre marques ayant des questions différentes. C'est un diagnostic d'acquisition avec dix réponses, pas un indice de marché. Il sert à vous comparer à vous-même au sein du même secteur et du même pays, et à voir si vous montez ou descendez en répétant l'analyse. Tout autre usage en fait un chiffre dénué de sens.Comment nous définissons chaque métrique
- Part de voix
- Vos apparitions divisées par les apparitions de toutes les marques que nous suivons. Chaque réponse apporte au maximum une apparition par marque, même si le texte répète le nom huit fois. Si le dénominateur est zéro, le chiffre est « pas de données », jamais zéro.
- Taux de présence
- Vos apparitions divisées par TOUTES les réponses de la période, y compris celles qui ne mentionnent personne. C'est la métrique honnête de la visibilité absolue, c'est pourquoi nous ne montrons jamais la part de voix sans elle à côté.
- Taux de citation
- Réponses où l'un de vos domaines est cité, divisées par les réponses des moteurs capables de citer. Les moteurs qui, structurellement, ne peuvent pas citer sont EXCLUS du dénominateur : les inclure dans la moyenne donnerait un chiffre dénué de sens.
- Position
- Le point médian du texte où vous apparaissez pour la première fois, calculé uniquement sur les réponses où vous apparaissez. C'est pourquoi elle n'est jamais montrée sans le taux de présence : si vous perdez en visibilité, votre position moyenne peut s'améliorer simplement parce qu'il ne reste que les bonnes réponses.
Limites à connaître
- Les réponses ne sont pas déterministes. Nous répétons chaque question plusieurs fois sur les forfaits payants et présentons chaque chiffre avec son nombre de réponses et son intervalle de confiance.
- En dessous de 30 réponses dans le périmètre, le chiffre est étiqueté comme échantillon réduit et ne déclenche pas d'alerte. Le score du scanner en a dix : c'est un diagnostic, pas une mesure.
- Nous mesurons avec la gamme économique de chaque moteur, pas la plus chère. La raison : le gros modèle ne mesure pas mieux. Dans nos propres relevés, le plus cher a produit 0,3 citation par réponse, le pire des six. Ce que ce produit observe, c’est si votre marque apparaît, à quelle position et avec quelles sources, et cela ne s’améliore pas en payant davantage. Le modèle exact de chaque réponse est conservé et auditable depuis le détail. Aucun moteur ne perd la recherche web.
- Les données de Google AI Overviews sont en bêta, dépendent d'un fournisseur externe d'observation du moteur de recherche et sont exclues de tout engagement de service.