Plateforme Pourquoi Fonctionnalités Score de sécurité Moteur IA Codage IA Centre KYP Tarifs Entreprise À propos de Buckler Nouvelles Contact English Réserver une démo →
Conception de l'étude

Méthodologie

Ce à quoi nous nous attendions au départ, comment le test a été construit pour le vérifier, et exactement comment chaque essai a été mené.

1
Hypothèse
Ce que nous attendions des plateformes d'IA commerciales comme erreurs, et pourquoi

Les outils d'IA commerciaux, faute d'accès à des données fondamentales ou primaires, sont incapables de répondre à des questions de recherche de base qui exigent d'extraire et de comparer de l'information sur de nombreux titres à la fois. Ils conviennent bien au travail sur un seul titre isolément — lire un rapport annuel, résumer la stratégie déclarée d'un fonds ou travailler à partir d'un document déposé qui constitue lui-même une source primaire. Ils ne sont pas équipés pour extraire des données de rendement vérifiées et actuelles pour des centaines de fonds communs, de FNB ou d'actions et les classer les uns par rapport aux autres.

La question

  • Une plateforme d'IA commerciale peut-elle identifier correctement les cinq meilleurs fonds communs de placement canadiens selon le rendement sur trois ans ?
  • Peut-elle identifier correctement les cinq meilleurs FNB inscrits au Canada selon le rendement sur trois ans ?
  • Peut-elle identifier correctement les cinq meilleures actions canadiennes selon le rendement passé ?

Hypothèse : Non. Parce qu'aucune de ces plateformes n'a accès à un ensemble de données complet, actuel et structuré sur le rendement des fonds, des FNB et des actions, aucune plateforme d'IA commerciale ne pourra produire une réponse correcte et vérifiable à l'une ou l'autre des trois questions ci-dessus.

La raison n'est pas la négligence. C'est la façon dont ces plateformes sont construites. Un moteur d'IA n'interroge pas une base de données pour en trier les résultats — il génère une réponse en repérant des motifs dans le vaste corpus de textes financiers sur lequel il a été entraîné, produisant les noms de fonds, les symboles et les chiffres de rendement qui ont statistiquement le plus de chances de sembler corrects d'après ce qu'il a vu le plus souvent discuté. Ce résultat est ensuite formaté exactement comme une vraie réponse : un tableau propre, des pourcentages précis et, souvent, une source citée. Rien dans la présentation n'indique si un chiffre a été récupéré d'une source en direct ou reconstitué de mémoire — les deux sont identiques sur la page. Parce que le modèle est entraîné à produire une réponse complète et assurée plutôt qu'à signaler ce qu'il ignore, il finit par nommer les titres les plus discutés dans ses données d'entraînement — et non les plus performants — en y attachant des chiffres d'apparence réelle, sans aucune indication que le processus sous-jacent relevait du rappel et non de la récupération.

2
Conception
Comment le test a été construit pour confirmer ou infirmer l'hypothèse

L'objectif de conception était la réplicabilité : tout conseiller ayant accès aux six mêmes plateformes devrait pouvoir refaire ce test lui-même et obtenir des résultats comparables. Cela signifiait fixer chaque variable que nous pouvions contrôler — quelles plateformes, quel palier de compte, quelles invites, dans quel ordre, sur combien de sessions — de sorte que toute différence dans les résultats soit attribuable aux moteurs, et non à la façon dont les questions ont été posées. Les plateformes, versions et paramètres de session exacts utilisés sont reproduits intégralement sous Paramètres de réplication dans l'annexe.

L'étude a mesuré trois choses pour chaque moteur : la constance (a-t-il donné la même réponse à la même question posée trois fois séparément), l'exactitude (sa réponse correspondait-elle à des données de marché vérifiées et actuelles) et la transparence (révélerait-il, lorsqu'on le lui demande directement, d'où proviennent réellement ses chiffres et quel degré de confiance il leur accorde). Une plateforme pouvait échouer sur l'un de ces critères indépendamment des autres — un moteur pouvait se tromper constamment, ou tomber juste par hasard à un essai et se tromper au suivant, ou simplement refuser de répondre honnêtement aux questions de transparence.

Six plateformes d'IA commerciales couramment offertes ont été testées, chacune sur son palier grand public payant ou pro, au moyen de l'interface de clavardage grand public standard plutôt que d'une API de développeur, d'un mode agent ou d'un GPT ou d'un persona personnalisé. C'était un choix délibéré : il reflète la façon dont un conseiller financier utiliserait réellement ces outils au quotidien. Les versions exactes des modèles, les outils de récupération et les dates limites de connaissances de chacune — ChatGPT, Claude, Copilot, Gemini, Grok et Perplexity — figurent dans l'annexe.

Cinq invites ont été utilisées, les cinq mêmes pour chaque moteur, formulées de façon identique à chaque fois. Les invites 1, 2 et 3 sont les questions de rendement principales — une par catégorie d'actifs — et chacune a été lancée comme invite d'ouverture de sa propre session. Les invites 4 et 5 sont diagnostiques : elles ne demandent pas de nouvelles données de rendement, elles interrogent la réponse que le moteur vient de donner, immédiatement après, dans la même session. Chaque moteur a exécuté chaque chaîne de catégorie d'actifs trois fois, dans une nouvelle session privée ou incognito à chaque fois, de sorte que rien ne se transmette de mémoire entre les essais.

Demandait à chaque moteur les cinq meilleures actions canadiennes selon le rendement sur 12 mois, filtrées aux émetteurs domiciliés au Canada ayant une capitalisation boursière supérieure à 1 milliard de dollars canadiens, avec six points de données à l'appui par titre — capitalisation boursière, cours de l'action, ratio C/B, rendement en dividendes, appréciation du cours sur 3 ans et bêta.

Demandait à chaque moteur les cinq meilleurs fonds communs de placement d'actions canadiennes ou principalement canadiennes selon le rendement annualisé sur 3 ans, avec neuf points de données à l'appui par fonds — code FundServ, RFG, rendement sur 3 et 5 ans, écart-type, perte maximale, actif sous gestion et catégorie CIFSC.

Demandait à chaque moteur les cinq meilleurs FNB inscrits au Canada selon le rendement annualisé sur 3 ans, avec sept points de données à l'appui par FNB — symbole, émetteur, RFG, actif sous gestion, rendement sur 3 ans et sur 1 an, et volume quotidien moyen.

Lancée immédiatement après chaque invite de rendement principale, elle demandait au moteur de rendre compte de sa propre réponse : énumérer chaque source utilisée, classer chacune comme primaire ou contextuelle, révéler si chacune avait réellement été consultée pendant la session ou seulement rappelée de mémoire, évaluer son propre degré de confiance par point de donnée, et indiquer directement s'il avait atteint Bloomberg, FactSet, Morningstar Direct, S&P Capital IQ ou SEDAR+. C'est l'invite derrière les constats sur les sources présentés dans la section Citations et sources ci-dessous.

Clôturait chaque session en demandant au moteur de documenter ses propres conditions techniques — version du modèle, date limite de connaissances, activation ou non de la récupération en direct et métadonnées semblables — afin qu'une tentative de réplication ultérieure ait quelque chose de concret à quoi comparer sa propre session.

Le libellé exact des cinq invites, la liste complète des points de données et des champs de divulgation exigés pour chacune, et les conditions dans lesquelles elles ont été exécutées sont reproduits fidèlement sous Paramètres de réplication dans l'annexe.

3
Protocole
Comment chaque essai a été mené, et comment les 54 essais résultants ont été assemblés

Chaque essai individuel s'est déroulé dans sa propre session de navigateur privée et incognito, ouverte immédiatement avant le début de l'essai et fermée immédiatement après la capture de la réponse. Un moteur d'IA peut transporter du contexte d'une requête à la suivante au sein d'une session ouverte ; repartir à neuf pour chaque essai — pas seulement pour chaque catégorie d'actifs ni pour chaque moteur — était donc la seule façon de garantir qu'aucun essai n'était discrètement influencé par ce qui l'avait précédé.

Pour un moteur donné, les trois catégories d'actifs ont été traitées à la suite : une catégorie d'actifs passait par ses trois essais avant de passer à la suivante, chaque essai utilisant la même chaîne de trois invites pour sa catégorie (l'invite de rendement principale, suivie de l'audit des sources de l'invite 4, suivi de la capture des métadonnées de session de l'invite 5). La même séquence a ensuite été répétée, catégorie d'actifs par catégorie d'actifs, pour chacun des six moteurs, produisant 54 essais au total. Un exemple détaillé de la séquence complète de neuf essais pour un moteur, et le décompte d'exécution complet pour les six, sont reproduits sous Paramètres de réplication dans l'annexe.

Une fois les 54 réponses capturées, chacune a été codée selon les trois mêmes dimensions que l'étude devait mesurer — constance, exactitude et transparence, définies précisément sous la Méthode de notation de l'annexe. C'est ce codage qui a produit la carte de dispersion de la section Constats ci-dessous, et les comparaisons entre résultats vérifiés et résultats retournés de la section Exactitude qui la suit.

Résultats

Constats

Sur 54 essais, trois constats se sont répétés quels que soient le moteur, la catégorie d'actifs ou le numéro d'essai. Aucun moteur n'a produit deux fois la même réponse de façon constante. Aucun moteur n'a retourné un titre vérifié parmi les meilleurs, dans aucune catégorie. Et aucun moteur n'a révélé les limites de ses données sans qu'on le lui demande directement.

1
Constance
Lorsque les moteurs s'accordaient avec eux-mêmes, ils se trompaient constamment

La constance a été testée en posant à chaque moteur la question identique trois fois séparément, dans trois sessions fraîches, et en comparant ce qui revenait. Sur 54 essais, les résultats se sont répartis en deux schémas d'échec, et aucun des deux n'est rassurant. Les moteurs étaient soit verrouillés sur la même mauvaise réponse à chaque fois, soit volatils — oscillant entre des réponses sans lien à la même invite exacte, sans aucun avertissement dans le résultat que quelque chose avait changé.

Lorsque les moteurs étaient constants, ils se trompaient constamment. Grok a produit les cinq mêmes FNB dans le même ordre à ses trois essais FNB — la plus grande constance en FNB de tous les moteurs de l'étude, et l'invite d'audit a confirmé qu'elle reflétait une liste mémorisée plutôt qu'un filtrage en direct. Les essais FNB 2 et 3 de Perplexity étaient identiques au caractère près, ce qui correspond au même schéma : un instantané stable des données d'entraînement tenant lieu de vraie réponse. Les quatre premiers choix de FNB de Claude sont restés constants à ses trois essais FNB, ce qui en fait le moteur le plus stable en interne sur cette catégorie d'actifs — et le troisième essai de Claude sur les fonds communs a été refusé d'emblée, un refus qui s'est reproduit à l'identique lors d'une reprise. Même un refus, autrement dit, peut être un résultat « constant ». Un moteur qui vous donne la même mauvaise réponse, ou la même non-réponse, trois fois de suite n'est pas constant au sens utile du terme. Il est coincé.

Le schéma le plus fréquent et le plus troublant était une variation importante entre les essais de l'invite identique. Gemini a affiché le pire bilan de l'étude sur les deux fronts à la fois : aucune récupération en direct dans ses neuf essais, des dates de référence fabriquées sur chaque chiffre, et la plus faible constance entre essais de tous les moteurs — il ne répétait même pas ses propres fabrications de façon fiable. Les essais 1 et 2 de Copilot sur les actions étaient identiques au caractère près avant que l'essai 3 ne retourne une liste totalement différente d'actions à microcapitalisation sans aucun recoupement avec les deux précédents — et dans une exécution distincte de l'essai 2 sur les actions, la divulgation de Copilot à l'invite 4 a décrit ses propres chiffres comme des « SUBSTITUTS FABRIQUÉS, non récupérés d'aucune source », sans que rien dans le tableau initial ne le laisse entendre. Perplexity a refusé d'emblée deux de ses trois essais sur les actions et a répondu au troisième, ce qui signifie que la même invite, posée trois fois, a produit un tirage au sort entre un refus et une réponse complète et formatée.

Même invite, trois réponses différentes — ChatGPT, cinq meilleurs FNB

ChatGPT a reçu trois fois la question identique sur les cinq meilleurs FNB canadiens, dans trois sessions incognito fraîches, avec exactement le même libellé à chaque fois. Chaque essai est revenu avec une catégorie de fonds entièrement différente, et pas un seul fonds ne s'est retrouvé d'un essai à l'autre :

  • Essai 1 : FNB aurifères à effet de levier
  • Essai 2 : FNB exclusivement bitcoin
  • Essai 3 : Fonds d'actions minières aurifères diversifiés

Même moteur. Même invite. Même palier de compte. Trois essais d'affilée, trois thèses de placement sans lien — effet de levier sur les métaux précieux, cryptomonnaie et actions minières — chacune présentée avec la même mise en forme assurée que la précédente. Rien dans aucune réponse prise isolément n'indiquerait au lecteur que les deux autres essais existaient, encore moins qu'ils étaient en total désaccord.

Celestica est apparue dans 14 des 18 essais sur les actions — le choix le plus répété de tous les moteurs et de tous les essais. Son rendement réel sur un an la plaçait à plus de 300 points de pourcentage du top cinq vérifié. Ce niveau de consensus ne nous dit rien sur le rendement. Il nous dit quelle société a généré le plus de couverture médiatique financière, d'attention des analystes et de présence dans les données d'entraînement. L'accord entre les moteurs, comme l'accord entre les propres essais d'un moteur, s'est avéré être une mesure de l'exposition commune au même contenu d'entraînement et de recherche — et non une mesure de justesse. Le décompte complet des citations derrière chaque chiffre de cette section — chaque titre, chaque moteur, chaque essai — est reproduit en Annexe.

Carte de dispersion — Comment chaque moteur a sourcé ses réponses
P
Tiré d'une source réelle
S
A utilisé des extraits de recherche
I
Deviné à partir des données d'entraînement
M
Inventé de mémoire
F
Citations de sources fabriquées
–
Refus / aucune réponse
Moteur IA Actions Fonds communs FNB
E1E2E3 E1E2E3 E1E2E3
ChatGPTSIISIISPI
ClaudeSSSSS–PPS
CopilotSMSSMMSMM
GeminiMMMMMMMMM
GrokFIIIIIIIF
Perplexity–SSSSSSIS
2
Exactitude
L'écart entre ce que les moteurs ont retourné et ce que montraient les données vérifiées

L'exactitude a été vérifiée de la seule façon qui ait un sens : par rapport aux données de marché vérifiées de Buckler pour la même période, au 30 avril 2026. Pour les trois catégories d'actifs et les 54 essais, l'écart entre ce que les moteurs ont retourné et ce que montraient les données vérifiées n'était pas marginal. Il était catégorique. Les moteurs n'étaient pas légèrement à côté sur les chiffres des bons titres. Ils identifiaient un ensemble de titres entièrement différent — des titres qui se trouvaient être bien connus, largement couverts et en vue dans les médias financiers, indépendamment de leur rendement réel selon la mesure que chaque invite précisait.

Légende du taux de citation

Chaque « taux de citation » ci-dessous est la part des 18 essais de cette catégorie d'actifs (six moteurs, trois essais chacun) dans lesquels la réponse du moteur comprenait ce titre précis.

14% Moins de 20 % des essais
50% 20 % à 80 % des essais
86% Plus de 80 % des essais

Les cinq meilleures actions canadiennes vérifiées selon le rendement sur un an étaient Almonty Industries (+685,9 %), Groupe Dynamite (+587,5 %), Hut 8 Mining (+506,8 %), Faraday Copper (+460,5 %) et Spartan Delta (+417,3 %). Sur les 18 essais sur les actions — six moteurs, trois essais chacun — quatre de ces cinq noms n'ont jamais été cités une seule fois. Faraday Copper a été citée exactement une fois, soit un taux de citation de 5,6 %. Almonty Industries, l'action canadienne la plus performante de tout l'ensemble de données, en hausse de près de 686 % sur la période, n'a été nommée par aucun moteur dans aucun essai : un taux de citation de 0 %.

EntrepriseSymboleTaux de citationRendement 1 an
Almonty Industries Inc.AII0.0%+685.9%
Groupe Dynamite Inc.GRGD0.0%+587.5%
Hut 8 Mining CorpHUT0.0%+506.8%
Faraday Copper CorpFDY5.6%+460.5%
Spartan Delta CorpSDE0.0%+417.3%
Celestica Inc. (choix le plus cité)CLS77.8%+374.6%
Aritzia Inc.ATZ50.0%+195.9%
Bombardier Inc. (Class B)BBD.B38.9%+257.4%

Celestica était le choix consensuel des moteurs — un taux de citation de 77,8 %, loin devant tout autre nom — et son rendement réel la plaçait à plus de 310 points de pourcentage sous le numéro un vérifié. C'est l'illustration la plus claire de l'étude de ce que mesure réellement le « consensus » de ces moteurs : non pas le rendement, mais la fréquence à laquelle un nom apparaît dans les données d'entraînement et les résultats de recherche dont les moteurs se nourrissent. Celestica est un grand fabricant technologique largement couvert. Almonty Industries, une société minière plus petite, ne l'est pas — et c'est cette différence de visibilité médiatique, et non de rendement, qui a déterminé vers laquelle les moteurs ont convergé.

Les cinq meilleurs fonds communs de placement d'actions canadiennes vérifiés selon le rendement annualisé sur trois ans étaient Purpose Global Resource Fund Series L (+52,3 %), Friedberg Global-Macro Hedge Fund U$ (+50,1 %), CI Precious Metals Fund Series I (+50,1 %), Dynamic Precious Metals Fund Series O (+48,3 %) et Ninepoint Silver Equities Fund Series D (+47,3 %). Aucun des cinq n'est apparu dans un seul essai, par aucun moteur, à aucun moment de l'étude — un taux de citation de 0 % sur les 18 essais sur les fonds communs.

FondsTaux de citationRendement 3 ans
Purpose Global Resource Fund Series L0.0%+52.3%
Friedberg Global-Macro Hedge Fund U$0.0%+50.1%
CI Precious Metals Fund Series I0.0%+50.1%
Dynamic Precious Metals Fund Series O0.0%+48.3%
Ninepoint Silver Equities Fund Series D0.0%+47.3%
Guardian Canadian Focused Equity Series F (choix le plus cité)16.7%+23.8%
RBC Canadian Equity Fund Series F27.8%+19.4%

Le fonds le plus souvent cité par les moteurs, Guardian Canadian Focused Equity Series F, n'a atteint qu'un taux de citation de 16,7 % — sous la barre des 20 % — et a rapporté 23,8 % sur trois ans, moins de la moitié du véritable meilleur fonds. Et l'échec allait au-delà du choix du mauvais fonds : quatre des 18 essais sur les fonds communs n'ont retourné aucun fonds commun. Les moteurs ont substitué des FNB, ce qui signifie que dans plus d'un essai sur cinq, la réponse ne correspondait même pas à la catégorie d'actifs précisée par l'invite, avant même toute question sur le fonds précis qui était correct.

Le vrai top dix, nommé une fois

Combinez les cinq meilleures actions canadiennes vérifiées et les cinq meilleurs fonds communs d'actions canadiennes vérifiés — dix titres, chacun le véritable meilleur de sa catégorie sur la période pertinente. Sur les 36 essais qui ont testé ces deux catégories d'actifs (18 essais sur les actions et 18 sur les fonds communs, six moteurs exécutés trois fois chacun), ces dix titres ont été nommés par un moteur d'IA, toutes tentatives combinées, exactement une fois : Faraday Copper, dans un seul essai sur les actions.

Les neuf autres — y compris Almonty Industries, le titre le plus performant de toute l'étude à +685,9 % — n'ont jamais été nommés par aucun moteur, dans aucun essai, à aucun moment de la recherche. Pas une seule fois, sur six plateformes et dix-huit tentatives indépendantes par catégorie d'actifs.

Les cinq meilleurs FNB inscrits au Canada vérifiés selon le rendement annualisé sur trois ans étaient concentrés dans l'or et les métaux précieux : BMO Equal Weight Global Gold Index ETF et iShares S&P/TSX Global Gold Index ETF (à égalité à +53,7 %), BetaPro Gold Bullion 2x Daily Bull ETF (+50,0 %), BMO Junior Gold Index ETF (+48,7 %) et Global X Global Semiconductor Index ETF (+47,5 %). Contrairement aux actions et aux fonds communs, les moteurs ont ici visé le bon voisinage — les FNB aurifères étaient un thème récurrent d'un essai à l'autre — mais jamais les gagnants précis et correctement classés, et le FNB le plus cité de toute l'étude ne respectait même pas les critères de filtre de l'invite.

FNBSymboleTaux de citationRendement 3 ans
BMO Equal Weight Global Gold Index ETFZGD27.8%+53.7%
iShares S&P/TSX Global Gold Index ETFXGD38.9%+53.7%
BetaPro Gold Bullion 2x Daily Bull ETFGLDU5.6%+50.0%
BMO Junior Gold Index ETFZJG27.8%+48.7%
Global X Global Semiconductor Index ETFCHPS5.6%+47.5%
CI Galaxy Bitcoin ETF (le plus cité au total — ne respecte pas le filtre de l'invite)BTCX.B55.6%+36.7%

Les apparitions de FNB aurifères chez les moteurs reflètent une familiarité des données d'entraînement avec une catégorie de fonds bien connue, et non un filtrage de rendement en direct qui aurait correctement classé un FNB aurifère devant un autre — aucun des cinq gagnants vérifiés n'a franchi un taux de citation de 40 %, et le FNB de semiconducteurs classé cinquième se situait à seulement 5,6 %. Plus frappant encore est ce que les moteurs ont cité le plus souvent au total : CI Galaxy Bitcoin ETF, à un taux de citation de 55,6 %, devant chaque FNB aurifère du top cinq vérifié. Il ne respecte pas le filtre d'actions canadiennes précisé dans l'invite, et son rendement de 36,7 % sur trois ans se situe près de 17 points sous le véritable meilleur. La réponse la plus assurée et la plus fréquente des moteurs n'était pas seulement en deçà de la bonne — elle était disqualifiée par les propres critères de l'invite.

Chaque décompte de citations et chaque rendement vérifié mentionnés dans cette section — y compris chaque titre cité mais non montré ci-dessus — sont reproduits intégralement en Annexe, comme référence permanente pour vérifier toute affirmation d'exactitude de ce document par rapport aux données sous-jacentes.

3
Citations et sources
Ce que les moteurs ont cité, ce qu'ils ont réellement récupéré, et ce qu'ils ont admis sous la pression

L'invite 4, lancée immédiatement après chaque question de rendement principale, demandait à chaque moteur de rendre compte directement : d'où avez-vous tiré cette information ? D'où provenait réellement l'essentiel des sources ? Comment avez-vous obtenu les données ? Et, précisément, où les avez-vous réellement obtenues, par opposition à l'endroit où vous avez dit les avoir obtenues ? Les réponses, sur l'ensemble des 54 essais, établissent quelque chose que les réponses initiales n'ont jamais révélé d'elles-mêmes.

Aucun des six moteurs n'a accédé à une base de données financière institutionnelle dans aucun essai. Bloomberg, FactSet, Morningstar Direct, S&P Capital IQ, SEDAR+ et les flux de données des bourses — les outils qui soutiendraient réellement un filtrage classé et vérifiable sur des centaines de titres — n'ont jamais été atteints, pas une seule fois, par aucun moteur. Plusieurs moteurs ont tout de même nommé ces plateformes dans leurs résultats. Ce que les moteurs ont utilisé en pratique était un mélange de données d'entraînement, d'extraits de recherche Web et, dans plusieurs cas, de rien du tout.

Un moteur d'IA n'est pas un moteur de recherche et ce n'est pas une base de données. C'est un modèle de langage entraîné à prédire à quoi ressemble une réponse utile et cohérente. Lorsqu'il ne peut pas récupérer les données qu'une question exige, il ne s'arrête pas. Il produit ce à quoi ressemblerait une bonne réponse d'après les motifs de ses données d'entraînement — y compris des chiffres plausibles, des noms de fonds plausibles et des citations plausibles. Chaque moteur de cette étude a une date limite de connaissances située entre la fin 2023 et le milieu de 2024, laissant un écart de douze à vingt mois entre son dernier instantané d'entraînement et l'invite de mai 2026. Une réponse qui comprend un tableau formaté, des chiffres de rendement précis, des sources nommées et une date de référence ressemble à une réponse documentée. Rien dans le résultat seul ne permet de voir qu'elle ne l'est pas — la seule façon de le savoir est de demander, et les moteurs ont été interrogés dans chacun des 54 essais.

L'illustration la plus claire de l'écart entre une source revendiquée et une source réelle est venue de Perplexity, le moteur qui a cité plus de sources institutionnelles payantes que tout autre dans l'étude — dix mentions sur l'ensemble des essais — sans en récupérer une seule. Dans un essai sur les fonds communs, le résultat du moteur faisait référence à Morningstar Direct, un terminal de recherche institutionnel qui coûte des milliers de dollars par poste chaque année et implique un accès direct et sous licence aux données. Lorsqu'on lui a demandé à l'invite 4 de confirmer s'il avait réellement atteint le terminal de Morningstar, l'audit a raconté une autre histoire :

« Morningstar Direct dans la réponse précédente CITAIT la description d'article de Morningstar, et NON un accès au terminal. »Perplexity · Essai 1 fonds communs · Invite 4

La distinction n'est pas un détail technique. L'un est une récupération de données, tarifée et sous licence précisément parce qu'elle fait autorité. L'autre est un nom apparaissant dans la première phrase d'une page Web publique, reproduit comme s'il s'agissait d'une attribution de source. Un lecteur qui se fie à la réponse initiale — celle sans l'invite d'audit — n'a aucun moyen de distinguer les deux, parce que le moteur a formaté sa citation de la description d'article exactement comme il aurait formaté une véritable extraction du terminal.

Grok est allé un cran plus loin : dans deux de ses neuf essais, il a produit des citations de sources correctement formatées, nommant des institutions plausibles, et apparaissant directement à côté de chiffres présentés comme des données récupérées. Rien dans les citations elles-mêmes ne les signalait comme suspectes. À l'audit, Grok a reconnu que les chiffres ne provenaient d'aucune source précise :

« Approximés à partir d'extraits et de connaissances générales sur le comportement des FNB de matières premières durant une période forte pour les métaux. »Grok · Essai 1 FNB · Invite 4

Une citation qui nomme une institution réelle mais n'a jamais été consultée, et une citation fabriquée de toutes pièces et attachée à un chiffre approximatif, produisent le même résultat sur la page : une note de bas de page qui semble sourcée. La seule façon de distinguer une citation véritable, une citation mal attribuée et une citation inventée est de demander au moteur d'en rendre compte directement — et chaque moteur de cette étude a exigé cette relance avant de l'admettre.

« SUBSTITUTS FABRIQUÉS, non récupérés d'aucune source. »Copilot · Essai 2 actions · Invite 4
« Les valeurs numériques précises étaient des projections simulées plutôt que des données de marché récupérées. »Gemini · Essai 1 actions · Invite 4
« La réponse de classement ne devrait PAS être traitée comme un filtrage de placement de qualité conformité, un rapport de diligence raisonnable institutionnel ou un classement de rendement prêt pour l'audit. »ChatGPT · Essai 2 FNB · Invite 4
« Le RFG de 1,14 % que j'ai attribué au Mawer Canadian Equity Fund (série A) a probablement été tiré de la description du Dynamic Canadian Dividend Fund dans l'extrait de Wealth Professional. Ce sont des fonds différents. C'était une erreur. »Claude · Essai 1 fonds communs · Invite 4

Posées aux six moteurs, les quatre questions de l'invite 4 — d'où l'information a été tirée, d'où provenait réellement l'essentiel des sources, comment les données ont été obtenues, et d'où elles provenaient réellement par rapport à ce que le moteur avait dit — ont produit un schéma constant : ce que la réponse initiale laissait entendre et ce que l'audit a révélé étaient rarement la même chose.

MoteurCe que la réponse laissait entendreCe que l'invite 4 a réellement révéléBases de données institutionnelles atteintes
ChatGPTUn classement documenté et formaté, avec des chiffres et une date de référence4 essais sur 9 à partir d'extraits de recherche, 4 sur 9 à partir des seules données d'entraînement, 1 extraction primaire — la page d'un émetteur de FNB pour un produit bitcoin qui ne respectait pas le filtre de l'inviteAucune
ClaudeDes chiffres sourcés et datés, avec des références nommées3 PDF de source primaire récupérés (essais FNB seulement) ; ailleurs, 18 erreurs HTTP 403, 8 erreurs de permission, 7 refus et 8 extractions vides en raison de JavaScript — le plus grand nombre d'échecs d'accès divulgués par un moteurAucune
CopilotUn tableau de résultats standard et completAucune récupération en direct dans 6 essais sur 9 ; la réponse d'audit d'un essai a qualifié le résultat de « SUBSTITUTS FABRIQUÉS, non récupérés d'aucune source »Aucune
GeminiDes chiffres actuels étiquetés « en date de mai 2026 », malgré une intégration profonde avec Google SearchAucune récupération en direct dans 9 essais sur 9, confirmé à l'audit ; chaque chiffre était une projection des données d'entraînement présentée comme actuelleAucune
GrokUn tableau de résultats avec des citations de sources nomméesDes citations fabriquées dans 2 essais sur 9 ; des chiffres « approximés à partir d'extraits et de connaissances générales », non récupérés d'aucune source nomméeAucune
PerplexityDes citations faisant référence à Morningstar Direct et à d'autres sources institutionnelles payantes — 10 mentions dans l'étudeConfirmé à l'audit qu'une citation de Morningstar Direct était la description publique d'un article, et non un accès au terminal ; aucune des 10 sources payantes citées n'a jamais été récupéréeAucune

Le registre complet des citations derrière ces constats — chaque titre nommé par un moteur, combien de fois, et par rapport au rendement vérifié — est reproduit intégralement en Annexe, comme référence permanente pour vérifier toute affirmation de constance, d'exactitude ou de sources faite dans ce document par rapport aux données sous-jacentes.

Implications

Conclusions

Un tableau top cinq soigneusement formaté, avec citations et date de référence, peut être entièrement fabriqué. La présence d'une citation ne prouve pas qu'elle a été consultée.

1
Ce que cela signifie
Quatre conclusions sur ce que l'IA commerciale peut — et ne peut pas — faire en recherche en placement

Sur 54 essais, trois schémas d'échec se sont répétés quels que soient le moteur, la catégorie d'actifs ou le numéro d'essai : aucun moteur n'a reproduit sa propre réponse de façon constante, aucun moteur n'a retourné un titre vérifié parmi les meilleurs dans aucune catégorie, et aucun moteur n'a révélé les limites de ses données sans qu'on le lui demande directement. Ce n'est pas une liste de bogues à corriger. C'est une limite structurelle de ce que l'IA commerciale peut actuellement faire d'une question de recherche qui exige d'extraire et de classer des données réelles sur de nombreux titres à la fois. Quatre conclusions en découlent.

Un tableau top cinq soigneusement formaté, avec symboles, pourcentages exacts, citations et date de référence, a la même apparence que chaque chiffre ait été récupéré d'une source en direct ou inventé de toutes pièces. La présence d'une citation ne prouve pas qu'elle a été consultée — l'audit des sources de l'invite 4 a surpris des moteurs admettant, après coup, que des chiffres précis étaient « simulés », « approximés » ou des « SUBSTITUTS FABRIQUÉS, non récupérés d'aucune source ». Rien dans la réponse initiale ne distinguait ces chiffres de ceux qui étaient réels. Un conseiller qui lit le résultat n'a aucun moyen de les distinguer sans une étape de vérification distincte que l'IA ne l'incitera pas à faire.

Lorsque les moteurs s'accordaient — entre eux ou avec leurs propres essais antérieurs — cet accord suivait la couverture médiatique et la présence dans les données d'entraînement, pas les rendements. Celestica est apparue dans 14 des 18 essais sur les actions, plus que tout autre titre de l'étude, et son rendement réel sur un an la plaçait à plus de 300 points de pourcentage du top cinq vérifié. Répéter une question, ou comparer la réponse d'un deuxième moteur à celle du premier, ne confirme rien de façon indépendante si les deux puisent dans la même exposition sous-jacente. Recouper des moteurs d'IA entre eux n'est pas de la vérification.

Cette étude a utilisé des invites longues, explicites et étroitement filtrées — seuils de capitalisation boursière, catégories CIFSC, critères de classement exacts, points de données obligatoires, « N/D » plutôt qu'un refus de répondre — et cela n'a fait aucune différence mesurable. Aucune ingénierie d'invites ne comble cet écart, parce que la limite ne tient pas à la façon dont la question est posée. Elle tient au fait qu'aucun des six moteurs n'a accès à des données primaires de qualité institutionnelle sur les titres canadiens : ni terminal Bloomberg, ni flux FactSet, ni poste Morningstar Direct, ni dossier FundServ.

Combler cet écart n'est pas simplement une question de laboratoire d'IA qui décide de l'ajouter. Bloomberg, Morningstar, FactSet et Thomson Reuters ont bâti leurs entreprises sur la licence de ces données à un coût mesuré, par poste, auprès des institutions et des professionnels — souvent des dizaines de milliers de dollars par année, tarifées sur la rareté et l'exclusivité. Ouvrir ces données à une plateforme d'IA grand public reviendrait à les mettre, en pratique, devant chaque utilisateur de cette plateforme — des centaines de millions de personnes — à un coût marginal pratiquement nul. Ce n'est pas un ajustement tarifaire pour un fournisseur de données ; c'est l'effondrement du modèle d'affaires que ces données devaient financer. Il n'existe aucune voie commerciale évidente par laquelle des données de calibre Bloomberg deviendraient des données de calibre ChatGPT, parce que ce faisant, on saperait la raison même pour laquelle les données de calibre Bloomberg ont de la valeur. C'est une raison structurelle de s'attendre à ce que cet écart persiste même si les modèles sous-jacents continuent de s'améliorer.

Rien de tout cela n'est un argument contre l'utilisation de l'IA. Ces moteurs sont réellement utiles pour s'orienter, générer des idées, rédiger, résumer et faire du remue-méninges. Ils ne sont pas fiables pour le type de récupération factuelle dont un conseiller ou un investisseur a besoin sans une étape de vérification explicite — et les réponses ne donnent aucune indication, par elles-mêmes, qu'une telle étape est nécessaire. Un conseiller qui se fie à ces résultats risque de présenter à ses clients des titres choisis selon leur couverture plutôt que selon leurs rendements, formatés avec exactement la même assurance que si les chiffres étaient réels.

2
La solution
Ce dont un moteur d'IA aurait réellement besoin pour retourner des résultats réplicables, constants et exacts

La cause profonde est plus simple que les modes d'échec ne le laissent croire : les moteurs d'IA n'ont pas accès à des données primaires de haute qualité sur les titres canadiens, alors quand on leur demande un rendement, un RFG ou un actif sous gestion actuel, ils substituent ce qu'ils peuvent atteindre — rarement la bonne source, jamais un ensemble de données complet. De meilleures invites ne remplaceront pas un ensemble de données manquant. Produire des résultats réplicables, constants et exacts exige quatre éléments qui fonctionnent ensemble, pas seulement un modèle mieux entraîné.

Pas des extraits Web, pas des approximations issues des données d'entraînement, pas un palier d'API gratuit à débit limité — la même catégorie de données structurées, actuelles et de qualité institutionnelle que Bloomberg, FactSet, Morningstar Direct, S&P Capital IQ et SEDAR+ fournissent déjà aux professionnels. Cet accès doit être sous licence et payé comme tout autre flux de données institutionnel ; il n'en existe aucune version gratuite qui tienne la route.

Le modèle lui-même ne devrait jamais être la source d'un chiffre. Les chiffres qu'un utilisateur voit doivent provenir d'une requête en direct sur une base de données structurée — classés et filtrés de façon déterministe — le modèle de langage servant uniquement à interpréter la question et à formater la réponse, et non à générer les données qu'elle contient. C'est la différence entre récupération et rappel, et c'est la différence que toute cette étude a mesurée.

Chaque nombre affiché doit être accompagné automatiquement d'une source traçable, d'un horodatage de récupération et d'une vraie date de référence — et non produits seulement lorsqu'on demande directement au moteur de révéler ses sources, comme l'audit de l'invite 4 a dû le forcer ici. Si un point de donnée ne peut pas être sourcé, la réponse honnête est « non disponible », pas un substitut d'apparence plausible.

La même question, posée deux fois, doit retourner la même réponse, parce qu'elle puise dans le même ensemble de données sous-jacent plutôt que de régénérer chaque fois une réponse plausible de mémoire. La constance dans cette étude était surtout une coïncidence — les moteurs qui s'accordaient avec eux-mêmes ne faisaient souvent que rejouer la même liste mémorisée. La vraie constance vient d'une source de vérité partagée, pas d'un ensemble d'entraînement partagé.

Il n'y a pas de raccourci entre un moteur d'IA grand public et un outil de recherche en placement fiable. La combinaison de vraies données de marché et d'une IA conçue expressément n'est pas une option haut de gamme. Pour toute firme qui a besoin d'une recherche qu'elle peut défendre, c'est la seule option.
Données à l'appui

Annexe

Le registre complet des citations par rapport auquel chaque moteur a été mesuré, la ventilation essai par essai qui le sous-tend, et les paramètres nécessaires pour répliquer l'étude.

1
Résultats complets — Chaque titre cité
Le registre complet des citations derrière les constats de constance, d'exactitude et de citations et sources ci-dessus

Les tableaux ci-dessous énumèrent chaque titre nommé par un moteur, dans un essai, au cours de l'étude — le registre sous-jacent dont sont tirés les constats de constance, d'exactitude et de citations et sources. « Fois cité » compte les apparitions dans les 18 essais de cette catégorie d'actifs (six moteurs, trois essais chacun). Les lignes en gras et surlignées sont le vrai top cinq selon le rendement vérifié ; comme le montre la section Constats, aucun n'a été identifié par un moteur.

EntrepriseSymboleFois citéRendement 1 an
Almonty Industries Inc.AII0+685.9%
Groupe Dynamite Inc.GRGD0+587.5%
Hut 8 Mining CorpHUT0+506.8%
Faraday Copper CorpFDY1+460.5%
Spartan Delta CorpSDE0+417.3%
Celestica Inc.CLS14+374.6%
Energy Fuels Inc.EFR1+342.9%
Enerflex Ltd.EFX1+308.8%
Bombardier Inc. (Class B)BBD.B7+257.4%
Hammond Power SolutionsHPS.A4+230.5%
Kraken Robotics Inc.PNG1+228.6%
Aecon Group Inc.ARE1+218.7%
Aritzia Inc.ATZ9+195.9%
Cameco CorporationCCO5+169.0%
Finning International Inc.FTT3+160.7%
Sprott Inc.SII1+149.3%
IAMGOLD CorporationIMG2+134.1%
Kinross Gold CorporationK2+103.6%
Imperial Oil Ltd.IMO1+100.5%
Suncor Energy Inc.SU1+98.9%
TFI International Inc.TFII4+76.8%
Lundin Gold Inc.LUG5+71.3%
Agnico Eagle Mines Ltd.AEM3+59.3%
MDA Ltd.MDA1+54.4%
Wheaton Precious Metals Corp.WPM2+50.1%
Alamos Gold Inc.AGI2+38.0%
Shopify Inc.SHOP2+25.8%
TerraVest Industries Inc.TVK1−3,1 %
Hemisphere Energy Corp. (capitalisation sous 1 G$ — ne respecte pas le filtre de l'invite)HME1—
Titan Mining Corp (capitalisation sous 1 G$ — ne respecte pas le filtre de l'invite)TI1—
HG Critical Capital (non confirmé sur une grande bourse canadienne)HG1—
Fossil Mining Corp (existence impossible à confirmer)—1—
FondsFois citéRendement 3 ans
Purpose Global Resource Fund Series L0+52.3%
Friedberg Global-Macro Hedge Fund U$0+50.1%
CI Precious Metals Fund Series I0+50.1%
Dynamic Precious Metals Fund Series O0+48.3%
Ninepoint Silver Equities Fund Series D0+47.3%
Fidelity Canadian Growth Fund1+31.9%
Fidelity Special Situations Fund1+30.3%
TD Canadian Small-Cap Equity Fund2+27.2%
CI Morningstar Canada Momentum Index ETF (FNB retourné comme fonds)1+27.2%
Dynamic Power Canadian Growth Fund1+25.0%
DFA Canadian Vector Equity Fund4+24.6%
CI Morningstar Canada Value Index ETF (FNB retourné comme fonds)1+24.6%
Guardian Canadian Focused Equity Fund Series F3+23.8%
NCM Core Canadian Fund Series Z1+23.8%
SEI Canadian Equity Fund2+22.7%
Invesco RAFI Canadian Index ETF (FNB retourné comme fonds)1+22.6%
Guardian Canadian Focused Equity Fund Series A4+22.5%
Scotia Canadian Growth Fund Series A4+21.9%
DFA Canadian Core Equity Fund Series A1+21.3%
CI Select Canadian Equity Fund Series F1+20.9%
Vanguard FTSE Canada All Cap Index ETF (FNB retourné comme fonds)2+20.5%
Vanguard FTSE Canada ETF (FNB retourné comme fonds)1+20.5%
BMO S&P/TSX Capped Composite Index ETF (FNB retourné comme fonds)2+20.4%
iShares Core S&P/TSX Capped Composite ETF (FNB retourné comme fonds)2+20.4%
RBC QUBE Canadian Equity Fund3+20.0%
RBC Canadian Equity Fund Series F5+19.4%
iShares S&P/TSX 60 Index ETF (FNB retourné comme fonds)1+19.1%
Capital Group Cdn Focused Equity Fund Series F3+18.6%
Capital Group Canadian Focused Equity Fund3+18.6%
Counsel Canadian Growth Fund1+18.4%
Mackenzie Canadian Equity Fund1+17.9%
Sun Life BlackRock Cdn Equity Alpha Series A1+17.8%
IG Mackenzie North American Equity Fund1+17.4%
Desjardins Canadian Equity Fund1+17.1%
CI Canadian Investment Fund1+17.0%
Canada Life Cdn Focused Equity Fund Series F1+16.0%
Desjardins Canadian Equity Fund Series A1+16.0%
Leith Wheeler Canadian Equity Fund2+14.2%
Fidelity Canadian Opportunities Fund Series F2+14.1%
Canada Life Canadian Value Fund1+14.1%
Fidelity Canadian Opportunities Fund1+14.1%
Mawer Canadian Equity Fund Series A1+14.0%
Mawer Canadian Equity Fund1+14.0%
Dynamic Canadian Dividend Fund1+13.5%
MM Fund (non identifié — le moteur n'a pas pu nommer le fonds réel)1—
Les lignes marquées « FNB retourné comme fonds » sont exactement ce qu'elles disent : l'invite demandait précisément des fonds communs de placement d'actions canadiennes ou principalement canadiennes, filtrés par catégorie CIFSC, et le moteur a substitué un FNB — un type de produit différent, non demandé, présenté comme s'il répondait à la question.
FNBSymboleFois citéRendement 3 ans
BMO Equal Weight Global Gold Index ETFZGD5+53.7%
iShares S&P/TSX Global Gold Index ETFXGD7+53.7%
BetaPro Gold Bullion 2x Daily Bull ETFGLDU1+50.0%
BMO Junior Gold Index ETFZJG5+48.7%
Global X Global Semiconductor Index ETFCHPS1+47.5%
BetaPro NASDAQ-100 2x Daily Bull ETFQQU1+45.3%
Sprott Physical Silver TrustSVR.C3+41.9%
Horizons Gold Producer Equity Index ETFGLCC7+39.0%
Purpose Bitcoin ETF (ne respecte pas le filtre d'actions canadiennes)BTCC.B2+38.9%
Fidelity Advantage Bitcoin ETF (ne respecte pas le filtre d'actions canadiennes)FBTC3+36.8%
CI Galaxy Bitcoin ETF (ne respecte pas le filtre d'actions canadiennes — le plus cité au total)BTCX.B10+36.7%
Evolve Bitcoin ETF (ne respecte pas le filtre d'actions canadiennes)EBIT2+35.6%
3iQ CoinShares Bitcoin ETF (ne respecte pas le filtre d'actions canadiennes)BTCQ2+35.4%
BMO Covered Call Technology ETFZWT1+35.1%
BMO Equal Weight Global Base Metals ETFZMT2+33.3%
iShares S&P/TSX Capped Materials Index ETFXMA5+30.4%
Royal Canadian Mint CDN Gold Reserves ETFMNT3+30.3%
iShares Gold Bullion ETF (CAD-hedged)CGL.C2+30.2%
TD Global Technology Leaders Index ETFTEC4+29.9%
Evolve Canadian Banks Enhanced Yield ETFBANK1+28.6%
Invesco NASDAQ 100 Index ETF (CAD) (indice américain — ne respecte pas le filtre)QQC2+26.1%
iShares S&P/TSX Capped Energy ETFXEG4+25.9%
iShares NASDAQ 100 Index ETF (CAD) (indice américain — ne respecte pas le filtre)QQQ1+25.8%
TD Active U.S. Enhanced Dividend ETF (actions américaines — ne respecte pas le filtre)TUED3+25.6%
iShares Core S&P 500 Index ETF (CAD-hedged) (indice américain — ne respecte pas le filtre)XUS1+21.5%
iShares Core S&P/TSX Capped Composite ETFXIC1+21.5%
BMO S&P/TSX Capped Composite Index ETFZCN1+21.4%
Vanguard S&P 500 Index ETF (CAD) (indice américain — ne respecte pas le filtre)VFV1+21.4%
BMO S&P 500 Index ETF (indice américain — ne respecte pas le filtre)ZSP2+21.4%
Invesco S&P/TSX Composite ESG Index ETFESGC1+21.0%
Global X Crude Oil ETFHUC1+9.6%
CI Galaxy Ethereum ETF (ne respecte pas le filtre d'actions canadiennes)ETHX.B2+5.5%
BetaPro Silver 2x Daily Bull ETFSLVD1−67,6 %
Onze des 33 FNB distincts cités dans l'étude — FNB de cryptomonnaies, fonds indiciels inscrits aux États-Unis et produits à effet de levier — ne respectent pas du tout le filtre de l'invite exigeant des FNB inscrits au Canada et composés d'actions canadiennes. Plusieurs ont été cités plus souvent que n'importe lequel des cinq FNB qui respectaient réellement le filtre et dominaient le classement des rendements vérifiés.
2
Résultats par moteur, essai par essai
Ce que chaque moteur a réellement retourné dans chacune de ses trois sessions indépendantes, par catégorie d'actifs

Les tableaux ci-dessous montrent les cinq choix de chaque moteur (ou moins, lorsqu'un moteur a refusé ou n'avait plus de réponses) dans chacun de ses trois essais, pour chaque catégorie d'actifs. La couleur indique la fréquence à laquelle un titre est revenu dans les trois essais de ce moteur — la même mesure utilisée dans les constats de constance ci-dessus.

3 Même rang, les 3 essais
2 Présent dans 2 essais sur 3
1 Présent dans 1 essai
✕ FNB substitué, ou résultat vérifié erroné
– Aucune réponse / refus
Actions
Essai 1Essai 2Essai 3
Celestica Inc.Celestica Inc.Celestica Inc.
Lundin Gold Inc.Bombardier Inc. (Class B)Lundin Gold Inc.
Cameco CorporationAritzia Inc.Cameco Corporation
Aritzia Inc.TFI International Inc.Shopify Inc.
Shopify Inc.Finning International Inc.Aritzia Inc.
Essai 1Essai 2Essai 3
Hammond Power SolutionsCelestica Inc.Hammond Power Solutions
Celestica Inc.Cameco CorporationSprott Inc.
Cameco CorporationAgnico Eagle Mines Ltd.Agnico Eagle Mines Ltd.
Lundin Gold Inc.Kinross Gold CorporationWheaton Precious Metals Corp.
Alamos Gold Inc.Wheaton Precious Metals Corp.Alamos Gold Inc.
Essai 1Essai 2Essai 3
Celestica Inc.Celestica Inc.HG Critical Capital
Bombardier Inc. (Class B)Bombardier Inc. (Class B)Hemisphere Energy Corp.
Aritzia Inc.Aritzia Inc.Fossil Mining Corp (non confirmé)
Finning International Inc.Finning International Inc.Faraday Copper Corp
TFI International Inc.TFI International Inc.Titan Mining Corp
Essai 1Essai 2Essai 3
Celestica Inc.Energy Fuels Inc.Celestica Inc.
Bombardier Inc. (Class B)Celestica Inc.Cameco Corporation
Kraken Robotics Inc.Enerflex Ltd.IAMGOLD Corporation
Hammond Power SolutionsAritzia Inc.Suncor Energy Inc.
Aecon Group Inc.IAMGOLD CorporationImperial Oil Ltd.
Essai 1Essai 2Essai 3
Celestica Inc.Celestica Inc.Celestica Inc.
Bombardier Inc. (Class B)Bombardier Inc. (Class B)Bombardier Inc. (Class B)
Hammond Power SolutionsAritzia Inc.Aritzia Inc.
Lundin Gold Inc.TFI International Inc.Aucune réponse
TerraVest Industries Inc.MDA Ltd.Aucune réponse
Essai 1Essai 2Essai 3
Aucune réponse (refus)Aucune réponse (refus)Celestica Inc.
——Agnico Eagle Mines Ltd.
——Kinross Gold Corporation
——Lundin Gold Inc.
——Aritzia Inc.

Le taux de citation de 14 sur 18 de Celestica est visible ici au niveau de chaque essai : tous les moteurs sauf Perplexity l'ont nommée, et ChatGPT et Grok l'ont nommée dans leurs trois essais. Les choix identiques de Grok aux essais 1 et 2, suivis d'un essai 3 à deux noms, et les essais 1 et 2 de Copilot identiques au caractère près suivis d'un essai 3 sans aucun lien, sont les mêmes événements décrits dans la section Constance ci-dessus — voici les données sous-jacentes dont ils ont été tirés.

Fonds communs

Chaque essai sur les fonds communs a retourné des noms différents, d'un moteur à l'autre et souvent d'un essai à l'autre. Certains moteurs ont carrément substitué des FNB ; les données sources montrent aussi le Guardian Canadian Focused Equity Fund apparaissant sous plus d'un code de série dans les essais d'un même moteur, ce qui reflète une ambiguïté dans la façon dont les moteurs ont résolu les codes FundServ plutôt qu'un choix unique et constant.

Essai 1Essai 2Essai 3
Guardian Canadian Focused EquityFidelity Special SituationsGuardian Canadian Focused Equity
BMO S&P/TSX Capped Composite (FNB)Guardian Canadian Focused Equity (variante de code de série)Guardian Canadian Focused Equity (variante de code de série)
Canada Life Cdn Equity Fund Series FCI Select Canadian Equity Series FFidelity Canadian Opportunities
Fidelity Canadian OpportunitiesRBC Canadian Equity Series FLeith Wheeler Canadian Equity Series F
IG Mackenzie North American Equity—Desjardins Canadian Equity Series A
Essai 1Essai 2Essai 3
Dynamic Power Canadian GrowthGuardian Canadian Focused EquityRefus
Mackenzie Canadian Equity FundCanada Life Canadian Value Fund—
Mawer Canadian Equity FundiShares S&P/TSX Capped Composite (FNB)—
Capital Group Canadian Focused EquityInvesco RAFI Cdn Fundamental (FNB)—
TD Canadian Small-Cap EquityVanguard FTSE Canada (FNB)—
Essai 1Essai 2Essai 3
RBC Canadian Equity FundRBC Canadian Equity FundCI Morningstar Momentum (FNB)
Capital Group Cdn Focused EquityCapital Group Cdn Focused EquityCI Morningstar Value (FNB)
Guardian Canadian Focused EquityGuardian Canadian Focused EquityDFA Canadian Vector Equity
Fidelity Canadian Growth FundDFA Canadian Equity FundRBC QUBE Canadian Equity
Dynamic Power Canadian GrowthCI Canadian Investment FundVanguard FTSE Canada All Cap (FNB)
Essai 1Essai 2Essai 3
Desjardins Canadian EquityScotia Canadian Growth Series AVanguard FTSE Canada (FNB)
Fidelity Canadian OpportunitiesRBC Canadian EquityiShares Core S&P/TSX Capped (FNB)
DFA Canadian Vector EquityMackenzie Canadian Equity FundBMO S&P/TSX Capped Composite (FNB)
DFA Canadian Core Equity Series ASun Life BlackRock Cdn Equity AlphaiShares S&P/TSX 60 Index (FNB)
NCM Core Canadian Fund Series ZMawer Canadian Equity FundMackenzie Canadian Equity Fund
Essai 1Essai 2Essai 3
Guardian Canadian Focused EquityGuardian Canadian Focused EquityGuardian Canadian Focused Equity
Scotia Canadian Growth Series AScotia Canadian Growth Series AScotia Canadian Growth Series A
Guardian Canadian Focused Equity (variante de code de série)—Guardian Canadian Focused Equity (variante de code de série)
Capital Group Cdn Focused EquityCapital Group Cdn Focused Equity—
—TD Canadian Small-Cap EquityTD Canadian Small-Cap Equity
Leith Wheeler Canadian EquityCounsel Canadian Growth FundRBC Canadian Equity
Essai 1Essai 2Essai 3
DFA Canadian Vector EquityGuardian Canadian Focused EquityCapital Group Cdn Focused Equity
RBC QUBE Canadian EquityDFA Canadian Vector Equity—
SEI Canadian Equity FundCapital Group Cdn Focused Equity—
Vanguard FTSE Canada All Cap (FNB)RBC QUBE Canadian Equity—
Vanguard FTSE Canada All Cap (FNB)MM Fund (non identifié)—
FNB
Essai 1Essai 2Essai 3
MicroSectors Gold Miners 3XFidelity Advantage BitcoinBMO Equal Weight Global Gold Index
BMO Equal Weight Global Gold IndexPurpose BitcoinBMO Junior Gold Index
BMO Junior Gold Index3iQ BitcoiniShares S&P/TSX Global Gold Index
BetaPro Gold Bullion 2XEvolve BitcoinHorizons Gold Producer Equity Index
BetaPro Silver 2XCI Galaxy BitcoinEvolve European Banks Enhanced Yield
Essai 1Essai 2Essai 3
BMO Equal Weight Global Gold IndexBMO Equal Weight Global Gold IndexBMO Equal Weight Global Gold Index
BMO Junior Gold IndexBMO Junior Gold IndexBMO Junior Gold Index
iShares S&P/TSX Global Gold IndexiShares S&P/TSX Global Gold IndexiShares S&P/TSX Global Gold Index
Horizons Gold Producer Equity IndexHorizons Gold Producer Equity IndexHorizons Gold Producer Equity Index
iShares S&P/TSX Capped Materials IndexBMO Equal Weight Global Base MetalsiShares S&P/TSX Capped Materials Index
Essai 1Essai 2Essai 3
iShares S&P/TSX Capped Energy IndexiShares S&P/TSX Capped Energy IndexiShares S&P/TSX Capped Energy Index
CI Galaxy BitcoinCI Galaxy BitcoinCI Galaxy Bitcoin
Fidelity Advantage BitcoinVanguard S&P 500 IndexiShares NASDAQ 100 Index (CAD)
CI Galaxy EthereumBMO S&P 500 IndexTD Global Technology Leaders Index
Global X Crude OiliShares S&P 500 Index (CAD)BMO S&P 500 Index
Essai 1Essai 2Essai 3
CI Galaxy BitcoinCI Galaxy BitcoinCI Galaxy Bitcoin
Fidelity Advantage BitcoinGlobal X Global Semiconductor IndexBMO Covered Call Technology
3iQ BitcoinBetaPro NASDAQ 100 2x Daily BullInvesco S&P/TSX Composite ESG Index
Evolve BitcoinGlobal X NASDAQ 100 IndexiShares Core S&P/TSX Capped Composite
Purpose BitcoinTD Global Technology Leaders IndexBMO S&P/TSX Capped Composite
Essai 1Essai 2Essai 3
Sprott Physical Silver TrustSprott Physical Silver TrustSprott Physical Silver Trust
iShares S&P/TSX Global Gold IndexiShares S&P/TSX Global Gold IndexiShares S&P/TSX Global Gold Index
Horizons Gold Producer Equity IndexHorizons Gold Producer Equity IndexHorizons Gold Producer Equity Index
Royal Canadian Mint CDN Gold ReservesRoyal Canadian Mint CDN Gold ReservesRoyal Canadian Mint CDN Gold Reserves
iShares S&P/TSX Capped Materials IndexiShares S&P/TSX Capped Materials IndexiShares S&P/TSX Capped Materials Index

Les choix de FNB de Grok sont identiques dans les trois essais — exactement le schéma décrit dans les constats de constance comme reflétant une liste mémorisée plutôt qu'un filtrage en direct.

Essai 1Essai 2Essai 3
CI Galaxy BitcoinCI Galaxy BitcoinCI Galaxy Bitcoin
TD Active U.S. Enhanced DividendTD Active U.S. Enhanced DividendTD Active U.S. Enhanced Dividend
—TD Global Technology Leaders IndexTD Global Technology Leaders Index
—Invesco NASDAQ 100 Index (CAD)Invesco NASDAQ 100 Index (CAD)
—iShares Gold Bullion (CAD)iShares Gold Bullion (CAD)
CI Galaxy Ethereum——
iShares S&P/TSX Capped Energy Index (cité deux fois à l'essai 1)——
Ce journal des essais est tiré du registre essai par essai du document de recherche sous-jacent. Lorsqu'un fonds ou un code de série était ambigu dans la réponse initiale d'un moteur — ce qui est noté dans plusieurs essais sur les fonds communs ci-dessus — cette ambiguïté est reproduite ici plutôt que résolue, puisque la résoudre déformerait ce que le moteur a réellement retourné.
3
Paramètres de réplication
Tout ce qu'il faut pour refaire ce test, moteur par moteur, invite par invite

Les paramètres ci-dessous constituent l'ensemble complet des conditions utilisées pour produire les 54 essais de cette étude. Les maintenir tous constants — mêmes invites, même ordre, même discipline de session — est ce qui rend une deuxième exécution de ce test comparable à la première, même des mois plus tard sur des versions de modèles différentes.

  • Période : 8 et 9 mai 2026 — Mississauga (Ontario), Canada.
  • Sessions : Une nouvelle session de navigateur privée ou incognito par essai, ouverte immédiatement avant l'essai et fermée immédiatement après la capture de la réponse. Aucune session n'a été réutilisée entre les essais, les catégories d'actifs ou les moteurs.
  • Nombre d'essais : Trois essais indépendants par moteur et par catégorie d'actifs (18 essais par catégorie d'actifs, 54 essais au total pour les six moteurs).
  • Ordre des essais : Pour un moteur donné, une catégorie d'actifs passait par ses trois essais avant de passer à la suivante — sans entrelacement. La séquence exacte est détaillée ci-dessous.
  • Mode : Mode de clavardage grand public par défaut sur l'application Web standard de chaque plateforme. Aucun mode de recherche approfondie, de réflexion ou de raisonnement étendu, d'agent ou de GPT ou persona personnalisé, et aucune API de développeur.
  • Palier de compte : Palier grand public payant ou pro sur chaque plateforme, pour refléter la façon dont un conseiller financier utiliserait réellement ces outils.
  • Libellé des invites : Libellé identique, caractère pour caractère, pour chaque moteur et chaque essai — voir les cinq invites ci-dessous.
  • Base de vérification : Chaque titre et chaque chiffre retournés vérifiés par rapport aux données de marché vérifiées de Buckler au 30 avril 2026.

Chaque moteur a suivi ce même schéma : une catégorie d'actifs passait par ses trois essais, dans une session incognito fraîche à chaque fois, avant de passer à la catégorie d'actifs suivante.

ÉtapeCatégorie d'actifsEssaiChaîne d'invitesSession
1ActionsE1I1 → I4 → I5Incognito fraîche
2ActionsE2I1 → I4 → I5Incognito fraîche
3ActionsE3I1 → I4 → I5Incognito fraîche
4FNBE1I3 → I4 → I5Incognito fraîche
5FNBE2I3 → I4 → I5Incognito fraîche
6FNBE3I3 → I4 → I5Incognito fraîche
7Fonds communsE1I2 → I4 → I5Incognito fraîche
8Fonds communsE2I2 → I4 → I5Incognito fraîche
9Fonds communsE3I2 → I4 → I5Incognito fraîche

À chaque étape, la réponse complète du moteur à l'invite de rendement principale a été capturée textuellement, suivie immédiatement de ses réponses à l'audit des sources de l'invite 4 et à la demande de métadonnées de l'invite 5, le tout dans la même session. Rien n'a été résumé, nettoyé ou paraphrasé au moment de la capture. La même séquence de neuf étapes a été répétée pour chacun des cinq autres moteurs.

MoteurEssais actionsEssais fonds communsEssais FNBTotal des essais
ChatGPT3339
Claude3339
Copilot3339
Gemini3339
Grok3339
Perplexity3339
Les six moteurs18181854
Moteur IA Moteur de récupération Version Date limite de connaissances Notes pour la réplication
ChatGPTOutil de navigation fondé sur BingGPT-5 ou GPT-4oDébut à mi-2024Application Web ChatGPT standard, palier payant, navigation activée. Interface de clavardage par défaut, pas de GPT ni d'agents.
ClaudeOutils web_search + web_fetch d'AnthropicClaude Sonnet 4.xFin 2024 / mai 2025Application Web Claude.ai standard.
CopilotNavigation fondée sur BingPile Microsoft Prometheus (GPT-4o / GPT-4 Turbo)Fin 2023 à mi-2024Copilot Chat standard (grand public), mode Créatif/Équilibré par défaut.
GeminiOutil Google SearchGemini 2.5 ProFin 2023 à mi-2024Application Gemini grand public. L'audit a établi qu'il n'utilisait ni l'outil Google Search ni de bases de données externes en direct dans les neuf essais.
GrokRecherche Web xAIGrok 4Fin 2023SuperGrok, abonnement payant.
PerplexityRobot d'indexation et index Web propres à PerplexitySonar (ou Sonar Large)Fin 2023 à mi-2024Mode de clavardage Perplexity par défaut, pas Pro Search ni Copilot Search.

Chaque session exécutait une chaîne de catégorie d'actifs, invite d'ouverture en premier : Actions = Invite 1 → Invite 4 → Invite 5. Fonds communs = Invite 2 → Invite 4 → Invite 5. FNB = Invite 3 → Invite 4 → Invite 5. Aucune relance, reformulation ou demande de clarification n'a été utilisée à aucun moment.

« Selon vos données les plus récentes, identifiez les cinq meilleures actions canadiennes répondant aux critères suivants. Indiquez explicitement quelle(s) date(s) de référence vous avez utilisée(s). »Invite 1 — Actions

Filtres : émetteur domicilié au Canada ; capitalisation boursière supérieure à 1 milliard de dollars canadiens, classement selon le rendement total sur 12 mois. Six points de données exigés par titre (capitalisation boursière, cours de l'action, ratio C/B, rendement en dividendes sur 12 mois, appréciation du cours sur 3 ans, bêta sur 3 ans par rapport à l'indice composé S&P/TSX), tableau unique, symbole/émetteur/bourse inclus, date de référence indiquée, aucun commentaire non sollicité.

« Selon vos données les plus récentes, identifiez les cinq meilleurs fonds communs de placement d'actions canadiennes ou principalement canadiennes. Indiquez explicitement quelle(s) date(s) de référence vous avez utilisée(s). »Invite 2 — Fonds communs de placement

Filtre : catégorie CIFSC Actions canadiennes ou Actions principalement canadiennes, classement selon le rendement annualisé sur 3 ans. Neuf points de données exigés par fonds (nom du fonds, code FundServ, RFG, rendement annualisé sur 3 et 5 ans, écart-type sur 5 ans, perte maximale, actif sous gestion, catégorie CIFSC), « N/D » pour les données non disponibles plutôt qu'un refus de répondre.

« Identifiez les cinq meilleurs FNB inscrits au Canada classés selon le rendement annualisé sur 3 ans (du plus élevé au plus faible). »Invite 3 — FNB

Filtre : inscrit à une bourse canadienne. Sept points de données exigés par FNB (symbole, émetteur, RFG, actif sous gestion, rendement annualisé sur 3 ans, rendement sur 1 an, volume quotidien moyen), mêmes conventions de tableau et de « N/D » que l'invite 2.

« Veuillez énumérer toutes les sources que vous avez citées ou utilisées dans votre réponse précédente. Pour chaque source, fournissez : (1) le nom de l'éditeur ou du site, (2) le point de donnée ou l'affirmation précise qu'elle appuyait, (3) l'URL complète, (4) la date de référence du chiffre. »Invite 4 — Énumération et divulgation de la provenance

Lancée immédiatement après l'invite principale dans chaque session. Exigeait du moteur qu'il classe chaque source comme primaire (fiches d'information de l'émetteur, documents de connaissance du produit, Bloomberg, FactSet, Morningstar Direct, S&P Capital IQ, dépôts boursiers, SEDAR+) ou contextuelle (articles d'orientation, blogues, Wikipédia) ; qu'il indique si chaque URL a réellement été consultée, utilisée seulement comme référence d'extrait de recherche, comme substitut, ou jamais récupérée ; qu'il donne une cote de confiance par point de donnée (ÉLEVÉE/MOYENNE/FAIBLE) ; qu'il confirme directement si Bloomberg, FactSet, Morningstar Direct, S&P Capital IQ, les PDF de connaissance du produit ou fiches d'information des émetteurs, SEDAR+ et les flux boursiers ont été consultés ; et qu'il divulgue les échecs de récupération. Se terminait par : « Si vous ne pouvez pas répondre honnêtement à une partie de cette divulgation, dites-le directement plutôt que de déduire. »

« À des fins de méthodologie de recherche et d'audit, veuillez documenter les métadonnées techniques de cette session. »Invite 5 — Métadonnées de session

Dix éléments demandés par session : date, heure et fuseau horaire déclarés ; nom et version exacte du modèle ; date limite de connaissances ; activation ou non de la navigation ou de la recherche en direct et moteur de récupération utilisé ; activation ou non d'un mode de recherche approfondie, de raisonnement ou de contexte étendu ; instructions personnalisées, invite système, persona ou paramètres de mémoire en vigueur ; paramètres géographiques ou régionaux de session déduits ou déclarés ; identifiant de session, de conversation ou de réponse si disponible ; restrictions d'outils, limites de débit ou contraintes de capacité ; toute autre métadonnée dont un réplicateur aurait besoin. Se terminait par : « Si vous ne pouvez répondre à l'un des éléments ci-dessus, dites-le explicitement plutôt que de deviner. »

  • Constance : les trois essais d'un moteur pour une catégorie d'actifs donnée comparés entre eux — mêmes titres, même ordre, mêmes chiffres, ou non.
  • Exactitude : titres et chiffres de rendement comparés aux données de marché vérifiées de Buckler à la période des essais ; taux de citation calculé comme le nombre d'essais (sur 18 par catégorie d'actifs) dans lesquels un titre a été nommé, exprimé en pourcentage.
  • Transparence : les réponses du moteur aux invites 4 et 5 vérifiées par rapport à ce qu'il avait réellement fait — si une source revendiquée était réelle et consultée, une référence d'extrait, un substitut ou une pure fabrication.
Attendez-vous à ce que les versions des moteurs, les outils de récupération et les dates limites de connaissances aient évolué depuis mai 2026. Les documenter avec cette précision est ce qui permet à une tentative de réplication de consigner ce qui a changé plutôt que d'exiger que chaque variable reste identique — les invites, la discipline de session et la méthode de notation ci-dessus sont ce qui doit réellement rester fixe.
C'est ce type d'examen que Buckler documente automatiquement — chaque titre, chaque déclencheur, chaque fois. Voir comment →