Une démonstration d'outil d'IA est toujours réussie. C'est son métier : elle a été préparée avec des données choisies, sur des cas qui fonctionnent, par quelqu'un qui connaît les formulations qui passent. Vous n'apprendrez donc à peu près rien en la regardant, et c'est normal.
Ce qui vous renseigne, ce sont quatre questions, dont aucune ne porte sur les fonctionnalités : ce que devient ce que vous déposez, ce que coûte l'usage quand le volume augmente, ce qui se passe quand l'outil se trompe, et comment vous partez si vous changez d'avis. Un fournisseur sérieux y répond sans se dérober ; les autres changent de sujet.
Cet article donne ces quatre questions, la grille qui va avec, et les trois formes de démonstration qui induisent en erreur. Il intervient à la fin d'une progression, pas au début : si vous n'avez pas encore identifié l'usage, commencez par notre article sur se mettre à l'IA quand on est une petite structure.
Sommaire
- Les quatre questions qui décident
- Tester l'outil dans vos conditions
- La grille, en une page
- Ce que cette grille ne dit pas
- Questions fréquentes
Les quatre questions qui décident
Elles portent toutes sur ce qui arrive après la signature, ce qui est exactement la partie qu'une démonstration ne montre pas.
Vos données, et leur coût à l'échelle
La première question se pose en trois temps : ce que vous déposez est-il conservé, est-il utilisé pour entraîner quoi que ce soit, et où est-il hébergé. Ces réponses existent, elles sont publiées, et un fournisseur qui renvoie à une formule générale plutôt qu'à un document précis vous dit déjà quelque chose. Si la réponse ne vous convient pas, l'exécution sur votre propre matériel est une option, abordée dans notre guide pour faire tourner une IA sur sa machine.
La deuxième question porte sur le prix réel, qui n'est presque jamais le prix affiché. Demandez ce que coûte votre volume estimé multiplié par trois, ce qui se passe quand vous dépassez un seuil, et si le tarif est indexé sur les utilisateurs, sur le volume traité ou sur les deux. Beaucoup de déconvenues budgétaires viennent d'une facturation qui change de logique au-delà d'un palier annoncé nulle part.
L'erreur, et la sortie
La troisième question est la plus négligée : que se passe-t-il quand la réponse est fausse, et surtout qui s'en aperçoit. Un outil qui produit une erreur visible immédiatement est bien moins dangereux qu'un outil qui produit une erreur plausible dans un document que personne ne relit. Demandez comment le système signale son incertitude, s'il cite ses sources, et ce que le fournisseur prévoit quand un utilisateur conteste un résultat.
La quatrième question décide de tout le reste : comment partez-vous. Pouvez-vous exporter ce que vous avez produit, dans un format lisible ailleurs. Vos réglages et vos historiques vous appartiennent-ils. Et combien de temps prendrait un changement de fournisseur si vous deviez l'engager demain. Une réponse évasive ici vaut tous les défauts fonctionnels réunis.
Tester l'outil dans vos conditions
Une démonstration répond à la question « est-ce possible ? ». Avant une adoption, votre test doit répondre à une autre question : « est-ce assez régulier, sur notre matière, pour cet usage ? »
Le jeu de données préparé
La démonstration tourne sur des documents propres, bien structurés, choisis pour l'exercice. Vos documents peuvent être scannés de travers, incomplets ou rédigés dans plusieurs styles. Un essai utile doit donc reprendre un petit échantillon représentatif du travail réel, avec les autorisations nécessaires et sans exposer de données sensibles.
La parade est simple et jamais refusée par un fournisseur sérieux : demandez à faire tourner l'outil sur vos propres documents, y compris les plus mauvais, et regardez ce qui sort.
Les cas difficiles et le volume réel
Ajoutez des documents ambigus, des formats inhabituels et les exceptions que l'équipe traite déjà à la main. Puis testez le volume envisagé : un résultat convaincant sur dix entrées ne dit rien du temps de vérification sur plusieurs centaines. Demandez enfin un exemple d'échec et la conduite prévue dans ce cas. L'objectif n'est pas de piéger le fournisseur, mais de mesurer la charge qui restera chez vous.
Une mesure extérieure ne remplace pas votre test
C'est le point sur lequel une mesure indépendante aide. L'Union européenne de radio-télévision a publié le 21 octobre 2025 une évaluation de plus de 3 000 réponses d'assistants d'IA, conduite par 22 médias de service public dans 18 pays et 14 langues, sur quatre assistants, avec des journalistes professionnels comme évaluateurs. Le constat publié : près de la moitié des réponses présentaient au moins un problème significatif, un tiers un problème sérieux de sourcing, et un cinquième un problème d'exactitude majeur.
Cette étude porte sur l'actualité, pas sur vos documents. Elle ne mesure donc ni votre outil, ni votre tâche, ni votre niveau de risque. Elle montre pourquoi le mot « assistant » ne suffit pas comme preuve de fiabilité ; votre décision doit reposer sur un essai correspondant à l'usage visé. La méthode de vérification au quotidien est décrite dans notre article sur comment utiliser l'intelligence artificielle.
La grille, en une page
Un cadre public existe pour structurer ce genre d'examen. Le NIST, l'institut américain de normalisation, a publié le 26 janvier 2023 un cadre volontaire de gestion des risques liés à l'IA, organisé autour de quatre fonctions : gouverner, cartographier, mesurer et gérer. Il est conçu pour des organisations bien plus grandes que la vôtre, et nous n'en résumerons pas le détail, que nous n'avons pas lu ligne à ligne. Sa logique, en revanche, se transpose : on décide qui répond, on établit ce qu'on utilise et pour quoi, on mesure, puis on suit dans la durée.
| Question | Ce que vous demandez | Réponse acceptable | Signal d'alerte |
|---|---|---|---|
| Vos données | Conservation, réutilisation pour l'entraînement, hébergement | Un document précis, daté, que vous pouvez lire | Une formule rassurante sans référence écrite |
| Le coût à l'échelle | Prix pour trois fois votre volume, seuils, base de facturation | Une simulation chiffrée sur votre cas | Un tarif d'appel sans grille au-delà |
| L'erreur | Signalement de l'incertitude, sources, recours | Un exemple d'échec montré spontanément | « Notre modèle ne se trompe pas » |
| La sortie | Export, propriété des réglages, délai de bascule | Un format lisible ailleurs, documenté | Un export partiel, ou payant |
| La suite | Qui maintient, à quelle fréquence, prévenu comment | Un engagement de version et de préavis | Des mises à jour silencieuses |
Ce que cette grille ne dit pas
Elle protège d'un mauvais achat. Elle ne garantit pas un bon usage, et la différence est considérable.
Le choix ne remplace pas la compétence métier
Un outil correctement choisi mais confié à quelqu'un qui ne sait pas juger son résultat reste risqué. À l'inverse, une personne qui connaît la tâche sait repérer une sortie plausible mais fausse. Aucune grille d'achat ne remplace cette connaissance du travail réel.
Le niveau d'examen doit rester proportionné
Deuxième limite, plus terre à terre : une évaluation coûte du temps, et ce temps se justifie mal pour un usage ponctuel avec une version gratuite. Réservez cet examen aux engagements réels, un abonnement annuel, un dépôt de documents sensibles, un outil que plusieurs personnes utiliseront. Pour un essai isolé, l'appliquer intégralement est une perte de temps.
Ce que l'association ne fait pas
IA Innovateurs est une association de vulgarisation. Nous ne faisons pas de conseil en achat, nous ne testons pas de solutions et nous ne recommanderons aucun outil : nous n'avons ni protocole ni banc d'essai qui nous autoriserait à classer des produits les uns par rapport aux autres.
Ce texte est une grille de lecture, pas un classement ni un avis sur un produit précis. Nous n'avons pas encore conduit de protocole comparatif au nom de l'association. Cette absence est une limite : pour une décision engageant des données sensibles, un budget important ou des personnes, il faut ajouter l'expertise juridique, de sécurité ou métier adaptée au contexte.
Questions fréquentes
Faut-il une compétence technique pour appliquer cette grille ?
Non, et c'est délibéré : les quatre questions portent sur des engagements contractuels et des comportements observables, pas sur l'architecture du système. Vous n'avez pas besoin de comprendre comment un modèle fonctionne pour demander où sont hébergées vos données ou comment vous exportez votre travail. La seule compétence requise est de savoir reconnaître une réponse évasive, ce qui relève de l'expérience commerciale ordinaire. Un profil technique aide sur les détails d'intégration, il n'est pas nécessaire pour la décision.
Que faire si le fournisseur refuse de répondre à l'une des quatre questions ?
Considérez ce refus comme la réponse, parce que c'en est une. Ces informations existent nécessairement : une entreprise sait où sont ses serveurs, comment elle facture au-delà d'un palier, et ce qu'elle exporte. Un refus signifie soit que la réponse vous déplairait, soit que votre interlocuteur ne la connaît pas, et les deux cas justifient d'insister ou de renoncer. Mettez les questions par écrit et demandez une réponse écrite : cela change souvent le niveau de précision.
Une version gratuite dispense-t-elle de cet examen ?
Partiellement seulement, et la nuance est importante. La question du coût ne se pose pas, celle de la sortie beaucoup moins, mais celles des données et de l'erreur restent entières : une version gratuite traite vos documents exactement comme une version payante, parfois avec des conditions de réutilisation plus larges. La règle pratique est simple : le niveau d'examen dépend de ce que vous déposez, pas de ce que vous payez. Pour des documents publics, un essai direct suffit ; dès qu'il y a des informations sur des personnes, les deux premières questions redeviennent obligatoires, comme le rappelle notre article sur ce qu'une petite association peut faire avec l'IA.
Vous voulez apprendre à poser ces questions sans transformer la rencontre en conseil d'achat ? Consultez les prochaines rencontres, découvrez qui nous sommes, ou écrivez-nous. Nos conférences et ateliers sont gratuits et ouverts à tous les niveaux. L'adhésion est distincte et facultative, à 25 € par an, avec un tarif solidaire à 10 € et une formule de membre bienfaiteur à 750 €. Adhérer maintenant